3 天前 / LinuxEverything
点击上方蓝色字关注我们~ Working with UTF-8 in the kernelByJonathan CorbetMarch 28, 2019 https://lwn.net/Articles/784124/ 大家都知道生活中的文件都在用各种各样的语言，也就有各种各样的文字写法。这些字符集可以用很多不同的方式编码。kernel的视角中一直比较简单：文件名和其他字符串数据只是字节流（byte stream），对kernel来说透明，不需要特殊处理。很少数情况下，kernel要处理text，也只需要ASCII。但是，最近出现了一个建议，希望在ext4文件系统中支持不区分大小写的文件名查找。如此一来，kernel代码必须完整支......
4 天前 / 董鹏
八年Java开发的感悟：什么才是程序员的立身之本>>> TCP Implementation in Linux: A Brief Tutorial一个简单教程关于 TCP 协议在 linux 内核的实现 翻译：内核小王子 （欢迎订阅微信公众号） 原文：Helali Bhuiyan, Mark McGinley, Tao Li, Malathi Veeraraghavan University of Virginia 原文链接 TCP Implementation in Linux: A Brief Tutorial A. Introduction本文档简要概述了如何在Linux中实现TCP。他可能并不全面，并且也不能保证完全准确。 B. TCP implementation in Linux图1 和 图2 展示了 TCP/IP 协议栈在 Linux 内核中的实现，......
7 天前 / mr7
供稿|eBayMOPSTeam&UMPTeam 本文2149字，预计阅读时间5分钟 更多干货请关注“eBay技术荟”公众号 导读 可用性和稳定性对于eBay的网络站点非常重要。 本文分享了CAL（集中式应用程序日志框架）中最近发生的一个有趣的TCP链接问题，这一问题会严重影响CAL的稳定性，进而影响eBay网络站点的良好运行，解决问题迫在眉睫。 来看看CAL团队如何使用TCPDUMP和systemtap工具，通过简单高效的四个步骤，找出问题的根本原因的。 CAL运行架构 CAL是eBay的集中式应用程序日志框架。 CAL的主要目的是集中收集应用程序服务器的本地日志，......
13 天前 / 恒生技术君
神通广大的河妖，能呼风唤雨，通天入地，法力无边。时不时要出来作怪，为害人间。Linux内存管理就是这么个狠角色。程序运行正常时，母慈子孝，提供稳定的服务，一旦出现个越界写或者错误释放内存，轻则运行结果出错，大多数时候直接宕机了。危害之巨大可不止鸡飞狗跳。既然内存问题是悬在每个开发者头上的达摩克利斯之剑，那么了解几个大法器与之对抗就尤为重要了！为了内存问题这个河妖作怪的时候能被镇住，就用有限的篇幅介绍河妖的妖法如何被法器降服。 知己知彼 他强任他强，开发过程中和排查问题时，对原理的了解能够指导我们的程序设计......
17 天前 / 涯之叶
庐山归来，终于有些空闲，见缝插针，今天赶紧把没有写完的“猫蛇之战”补齐。 如果没有读过前两篇或者想复习一下的，请点击： 从猫蛇之战看内核戏CPU 从猫蛇之战再看内核戏CPU 先说明一下，“连续剧”的成本有点高，无论如何，这一篇会把这个问题写完。 回顾一下，最初的问题是“为什么在调试器里读写空指针不会崩溃？”第一篇通过读源代码的方法揭示了调试器会使用特殊的probe函数： probe_kernel_read probe_kernel_write 上一篇通过试验证实，使用probe函数时CPU也会发怒报异常。本篇继续介绍CPU报了异常之后，内核是如何......
23 天前 / 涯之叶
学无止境，一直在做内核开发，却从来没有仔细想过这个过程。因为所有的程序都有个编译，链接的过程。在linux内核模块中，我们可以使用很多内核export出的函数，来实现我们的功能，作为内核附属功能的扩展。但是这些export出来的函数在hook的时候是远远不够用的，所以我们往往还要获取一些没有export出来的函数。使用这些没有export出来的函数就要我们清楚的知道内核模块是如何link的，也就是如何寻找符号的。 kallsyms_lookup_name首先来谈下这个函数，我们往往发现kallsyms_lookup_name能找到很多没有导出的符号。它的原理和insmod插入时的寻找符......
24 天前 / 南阳居士
在实现epoll之前，先得好好理解内核epoll的运行原理。内核的epoll可以从四方面来理解。
1. Epoll的数据结构，rbtree对
26 天前 / UCloud云计算
UCloud外网网关是为了承载外网IP、负载均衡等产品的外网出入向流量，当前基于Linux内核的OVS/GRE tunnel/netns/iptables等实现，很好地支撑了现有业务。同时，我们也在不断跟踪开源社区的新技术发展，并将之用于下一代外网网关的设计。这些新特性可将系统性能和管理能力再提上一档，满足未来几年的需求。在方案设计研发过程中发现，新特性存在不少缺陷和Bug，为此我们向开源社区回馈了10多个patch，并融入到kernel 5.0版本中，帮助完善kernel功能并提升稳定性。 当前业界的多租户外网网关很多都是基于OpenFlow的OpenvSwitch（OVS）方案，然而随着......
29 天前 / 小米运维
本文主要介绍了crond不断唤起sendmail导致资源耗尽的排查相关内容。 上篇文章回顾：理解Nginx中Server和Location的匹配逻辑 春节值班期间收到反馈，c3-im-msg-tun001.bj 和 c3-im-msg-tun002.bj这两台服务器资源使用异常，主要是mem和disk，监控图如下，图中资源占用突降是手动清理进程和文件的结果，这种手段治标不治本。 内存图 硬盘图 异常现象检查内存异常发现很多sendmail进程，每分钟增加一个，消耗内存资源 [root@c3-im-msg-tun002 ~]# ps -ef |grep sendmail | wc -l14069硬盘异常磁盘占用： /var/log/maillog 文件占满硬盘 ......
38 天前 / Shurlormes
下载mysql库先到mysql官网找到需要安装的版本https://dev.mysql.com/downloa... 然后再linux上执行 wget 将对应的rpm下载下来 shell> wget https://dev.mysql.com/get/mysql80-community-release-el7-2.noarch.rpm yum 安装mysql把下载下来的包添加到yum库 shell> rpm -Uvh mysql80-community-release-el7-2.noarch.rpm看一下是否添加成功了 shell> yum repolist all | grep mysql 可以开始安装了 shell> yum -y install mysql-community-server安装成功后，启动服务,并且查看mysql的状态 shell> systemctl start mysqld.serviceshell> sys......
39 天前 / 小米运维
本文主要介绍了SYNPROXY的相关原理、DDoS简述、LVS相关应用等内容。 上篇文章回顾：容器进程Core Dump处理 SYNPROXY简述 SYNPROXY是防御DDoS攻击的有力手段。 SYNPROXY是一个TCP握手代理，原生支持是从Linux内核3.13开始的。当一个TCP请求从客户端发出时，首先与该握手代理进行三次握手，其采用SYNCookie技术，只有该请求通过cookie合法性校验，代理服务器才会与服务器进行真正的TCP三次握手，此时客户端和服务端之间的连接才真正建立，进入数据传输阶段。 DDoS简述 DDoS（Distributed Denial of Service，分布式拒绝服务）攻击源......
41 天前 / 大贺
简介: 在 Windows 上，共享库由.dll表示；在 Linux 上，由.so表示。 Shared Library的优势 共享库，又称动态库或so文件，顾名思义，它可以在可执行文件启动时加载或进程运行期被调用。使用共享库有很多好处，例如（包含但不限于下面提到的场景）： 1)减少了依赖共享库的模块的大小，因为它们不必把共享库提供的功能的实现代码静态编译到自己的模块代码中。 2)在同一台机器上运行的多个进程会在内存中共享同一份动态库，操作系统采用的这种内存布局方式可以极大地节省机器内存资源。 3) 若很多模块依赖了以共享库形式提供的同一个底层库......
48 天前 / 涯之叶
2019年1月，由于默认安装的服务snapd API中的一个bug，通过默认安装的Ubuntu Linux被发现存在特权提升漏洞，任何本地用户都可以利用此漏洞直接获取root权限。 概述首先在此提供dirty_sock代码仓库中两个有效的exploit： dirty_sockv1：基于Ubuntu SSO的详细信息，使用create-user API创建本地用户。 dirty_sockv2：侧加载snap，其中包含生成新本地用户的install hook。 两者都对默认安装的Ubuntu有效。大部分测试是在18.10版本完成的，不过旧版本也受改漏洞影响。值得一提的是，snapd团队对此漏洞回应迅速且处理妥善。直接与他们合作也是非常愉......