3 天前 / 小姐姐味道
原创：小姐姐味道（微信公众号 ID：xjjdog），欢迎分享，转载请保留出处。 我们经常遇到 iowait 这个名词，在 top 命令中，vmstat 中，sar 命令中，都有它的身影。很多同学按照经验，当看到 iowait 非常高的时候，一般判定为磁盘 I/O 有瓶颈，但这并不完全正确。 io 并不是一个可靠值。 比如下面几个问题。 iowait 处于 100% 时，还能够运行其他 CPU 密集型应用么？iowait 处于 90% 以上，就一定证明 io 有问题么？iowait 占用非常少时，就一定证明 io 没问题么？1. 数值来自哪？上面提到的这些监控工具，看起来监控的值包容万象...
8 天前 / BloomingRose
从 Linux 源码看 Socket(TCP)的 listen 及连接队列前言笔者一直觉得如果能知道从应用到框架再到操作系统的每一处代码，是一件 Exciting 的事情。今天笔者就来从 Linux 源码的角度看下 Server 端的 Socket 在进行 listen 的时候到底做了哪些事情 ( 基于 Linux 3.10 内核)，当然由于 listen 的 backlog 参数和半连接 hash 表以及全连接队列都相关，在这一篇博客里也一块讲了。 如果想入门 Linux 内核源码，可以看下这本： Server 端 Socket 需要 Listen 众所周知，一个 Server 端 Socket 的建立，需要 socket、bind、listen、accept 四个步骤。
9 天前 / 小姐姐味道
原创：小姐姐味道（微信公众号 ID：xjjdog），欢迎分享，转载请保留出处。 今天介绍一个可以拿出去吹牛的功能：实现 socket 句柄在进程之间迁移！为了这篇文章，xjjdog 可算下了苦功夫，半夜还在翻资料。因为需要验证后，才能证明这项技术确实是正确的。 正文。 我们的服务器上，运行着大量的 server 实例（instance）。这些 instance，每个都要承载着数十万的连接和非常繁忙的网络请求。能够把这样的连接数，这样的流量，玩弄于股掌之间，是每个互联网程序员的梦想。
11 天前 / 钟子敬07
从 linux 源码看 socket 的 close 笔者一直觉得如果能知道从应用到框架再到操作系统的每一处代码，是一件 Exciting 的事情。上篇博客讲了 socket 的阻塞和非阻塞，这篇就开始谈一谈 socket 的 close( 以 tcp 为例且基于 linux-2.6.24 内核版本) TCP 关闭状态转移图：众所周知，TCP 的 close 过程是四次挥手，状态机的变迁也逃不出 TCP 状态转移图，如下图所示： tcp 的关闭主要分主动关闭、被动关闭以及同时关闭 ( 特殊情况，不做描述) 主动关闭 close(fd)的过程以 C 语言为例，在我们关闭 socket 的时候...
18 天前 / xF0rk
hi，大家好，欢迎来到极客重生的世界，今天给大家分享的是 Linux 网络新技术，当前正流行网络技是什么？那就是 eBPF 和 XDP 技术，Cilium+eBPF 超级火热，Google GCP 也刚刚全面转过来。 新技术出现的历史原因廉颇老矣，尚能饭否 iptables/netfilter iptables/netfilter 是上个时代 Linux 网络提供的优秀的防火墙技术，扩展性强，能够满足当时大部分网络应用需求，如果不知道 iptables/netfilter 是什么，请参考之前文章：一个奇葩的网络问题，把技术砖家"搞蒙了"，里面对 iptables/netfilter 技术有详细介绍。
23 天前 / hyper0x
一口君机缘巧合，接触到了一个开源的项目 ROS，只需要根据本文操作，就可以很容易搭建一个具有 3d 效果的开发环境，非常有意思，和大家分享下。 0、什么是 ROS ROS（Robot Operating System，下文简称“ROS”）是用于编写机器人软件程序的一种具有高度灵活性的软件架构，是一个开源的元操作系统。ROS 的原型源自斯坦福大学的 STanford Artificial Intelligence Robot (STAIR) 和 Personal Robotics (PR)项目。 它提供了操作系统应有的服务，包括硬件抽象，底层设备控制，常用函数的实现，进程间消息传递，以及包管理。
26 天前 / HueiFeng
IO 其实就是 Input 和 Output，在操作系统中就对应数据流的输入与输出。这个数据流的两端，可以是文件，也可以是网络的一台主机。但无论是文件，还是网络主机，其传输都是类似的，我们今天就以源头为文件进行说明。 一个文件要从磁盘到我们的内存，需要经过很复杂的操作。首先，需要将数据从硬件读取出来，然后放入操作系统内核缓冲区，之后再将数据拷贝到程序缓冲区，最后应用程序才能读取到这个文件。
30 天前 / HueiFeng
在《一文读懂 | 进程怎么绑定 CPU》这篇文章中介绍过，在 Linux 内核中会为每个 CPU 创建一个可运行进程队列，由于每个 CPU 都拥有一个可运行进程队列，那么就有可能会出现每个可运行进程队列之间的进程数不一样的问题，这就是所谓的负载不均衡问题，如下图所示： （图 1） 最极端的情况是，一个 CPU 的可运行进程队列拥有非常多的进程，而其他 CPU 的可运行进程队列为空，这就是著名的一核有难，多核围观，如下图： （图 2） 为了避免这个问题的出现，Linux 内核实现了 CPU 可运行进程队列之间的负载均衡。
49 天前 / flyer0126
▲点击上方“架构精进之路”关注公众号 回复“01”领取「程序员进阶大礼包」 这是「架构精进之路」公众号的第 67 篇原创文章 我们作为“码农”，每天都在接触编程，接触 linux 系统，那么常见的 Linux 目录和文件都有哪些，它们又有什么作用呢？想必大家经常会忽略这点，作为工作多年的你而言也不例外，今天就带大家来一起了解一下吧~1 初识目录结构 2 初识文件 2.1 文件类型 2.1.1 文件 第一个属性为 [-]。最常用的类型，包括：纯文本文件 (ASCII)； 二进制文件 (binary)； 数据格式的文件 (data)； 各种压缩文件。
50 天前 / 前哨君
开源前哨推荐有趣和热门的开源项目。有一个同名公众号：开源前哨 1 人赞同了该文章 知乎视频www.zhihu.com 知乎视频www.zhihu.com 知乎视频www.zhihu.com【导语】：无需“越狱”即可在 Mac、iPhone 和 iPad 上运行 Windows、Linux 等操作系统。 简介 UTM 是适用于 iOS 和 macOS 的全功能系统模拟器和虚拟机主机，基于 QEMU，可以在 Mac、iPhone 和 iPad 上运行 Windows、Linux 等。 UTM 具有以下特点： 使用 QEMU 的完整系统仿真支持 30 多种处理器，包括 x86_64、ARM64 和 RISC-V 使用 SPICE 和 QXL 的 VGA 图形模式文本终端模式支持 USB 设备支持 JIT 的...
55 天前 / 雨后天空
| 导语本文主要是讲 Linux 的调度系统， 本篇是终结篇，主要讲当前多核系统调度策略和调度优化，调度可以说是操作系统的灵魂，为了让 CPU 资源利用最大化，Linux 设计了一套非常精细的调度系统，对大多数场景都进行了很多优化，系统扩展性强，我们可以根据业务模型和业务场景的特点，有针对性的去进行性能优化。欢迎大家相互交流学习！ 目录 多核调度 在单核系统中，调度器只需要考虑任务执行先后顺序的问题，在多核系统中，除了任务先后问题，调度器还需要考虑 CPU 分配问题。
59 天前 / 浪淘沙
在开始今天的文章之前，我先来请大家思考几个小问题。问 1：我们在查看内核发送数据消耗的 CPU 时，是应该看 sy 还是 si ？问 2：为什么你服务器上的 /proc/softirqs 里 NET_RX 要比 NET_TX 大的多的多？问 3：发送网络数据的时候都涉及到哪些内存拷贝操作？这些问题虽然在线上经常看到，但我们似乎很少去深究。如果真的能透彻地把这些问题理解到位，我们对性能的掌控能力将会变得更强。 带着这三个问题，我们开始今天对 Linux 内核网络发送过程的深度剖析。还是按照我们之前的传统，先从一段简单的代码作为切入。
61 天前 / 博文视点Broadview
以下内容节选自《BPF 之巅：洞悉 Linux 系统和应用性能》一书！ BPF 是近年来 Linux 系统技术领域一个巨大的创新。作为 Linux 内核的一个关键发展节点，其重要程度不亚于虚拟化、容器、SDN 等技术。 BPF 和 eBPF 是什么 BPF 是 Berkeley Packet Filter（伯克利数据包过滤器）的缩写，这项冷门技术诞生于 1992 年，其作用是提升网络包过滤工具的性能。2013 年，Alexei Starovoitov 向 Linux 社区提交了重新实现 BPF 的内核补丁，经过他和 Daniel Borkmann 的共同完善， 相关工作在 2014 年正式并入 Linux 内核主线。