乐趣区

关于linux:软中断会吃掉你多少CPU

后面的几篇文章里探讨过了过程上下文切换和零碎调用对系统性能的影响,咱们明天再来看另外一个 CPU 吃货,那就是软中断。

你在用 vmstat 或者其余一些工具查看零碎 CPU 耗费的时候,发现有两列是独自列出来的,别离是是 hi 和 si。他们别离是硬中断和软中断。既然 vmstat 把中断的开销独自列出来了,就阐明一个问题,中断吃起 CPU 来那也是丝毫不含糊。

咱们没必要啃明确软中断的所有原理,但从一名谋求性能的开发者的角度来看,咱们有必要理解以下问题:

  • 一次软中断的开销到底多大?
  • 你的服务器上被软中断吃掉了多少 CPU 工夫?

如果你和我一样好奇下面的问题的答案,那请跟我来!

软中断的诞生

CPU 失常状况下都是分心解决用户的过程的,当内部的硬件或软件有音讯想要告诉 CPU,就会通过 中断请求(interrupt request,IRQ)的形式来进行。比方当你的鼠标有了点击产生,再比方磁盘设施实现了数据的读取的时候,都会通过中断告诉 CPU 工作已实现。

然而当中断机制利用到网络 IO 的时候,就产生了一点点问题。网络包收到后的解决工作,不像鼠标、键盘、磁盘 IO 读取实现那样简略,而是要进行大量的内核协定栈的解决,最终能力放到过程的接管缓存区中。如果只用一种中断(硬终端)的形式来解决网络 IO,因为硬中断的优先级又比拟高,这样 CPU 就会忙于解决大量的网络 IO 而不能及时响应键盘鼠标等事件,导致操作系统实时性变差,你会感觉机器以卡一卡的。

所以古代的 Linux 又创造了软件中断,配合硬中断来解决网络 IO。硬中断你能够了解只是个收包的,把包收取回来放到“家里”就完事,很快就能实现,这样不耽搁 CPU 响应其它内部高优先级的中断。而软中断优先级较低,负责将包进行各种解决,实现从驱动层、到网络协议栈,最终把解决进去的数据放到 socker 的接管 buffer 中。

软中断耗费的 CPU 周期绝对比硬中断要多不少,所以咱们本文来重点关注软中断的开销。

软中断开销估算

后面大抵介绍了软中断的前因后果,好了间接进入本文的主题上,软中断开销到底多大。好了,请跟我来一起计算:

1)查看软中断总耗时
首先用 top 命令能够看出每个核上软中断的开销占比,是在 si 列

top
top - 19:51:24 up 78 days,  7:53,  2 users,  load average: 1.30, 1.35, 1.35  
Tasks: 923 total,   2 running, 921 sleeping,   0 stopped,   0 zombie  
Cpu(s):  7.1%us,  1.4%sy,  0.0%ni, 90.1%id,  0.1%wa,  0.2%hi,  1.2%si,  0.0%st  
Mem:  65872372k total, 64711668k used,  1160704k free,   339384k buffers  
Swap:        0k total,        0k used,        0k free, 55542632k cached  

如上图所示,CPU 大概破费了 1.2% 的时钟周期在软中断上,也就是说每个核要花费 12ms。

2)查看软中断次数
再用 vmstat 命令能够看到软中断的次数

$ vmstat 1
procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu------
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 1  0      0 1231716 339244 55474204    0    0     6   496    0    0  7  3 90  0  0  
 2  0      0 1231352 339244 55474204    0    0     0   128 57402 24593  5  2 92  0  0  
 2  0      0 1230988 339244 55474528    0    0     0   140 55267 24213  5  2 93  0  0  
 2  0      0 1230988 339244 55474528    0    0     0   332 56328 23672  5  2 93  0  0  

每秒大概有 56000 次左右的软中断(该机器上是 web 服务,网络 IO 密集型的机器,其它中断能够忽略不计)。

3)计算每次软中断的耗时
该机器是 16 核的物理实机,故能够得出每个软中断须要的 CPU 工夫是 =12ms/(56000/16)次 =3.428us

从试验数据来看,一次软中断 CPU 开销大概 3.4us 左右

软中断的上下文切换

前文咱们计算出了一个绝对比拟准确的开销工夫。这个工夫里其实蕴含两局部,一是上下文切换开销,二是软中断内核执行开销。其中上下文切换和零碎调用、过程上下文切换有很多类似的中央。让咱们将他们进行一个简略的比照:

1. 和零碎调用开销比照

《深刻了解 Linux 内核 - 第五章》结尾的一句话,很形象地把中断和零碎调用两个不相干的概念分割了起来,奇妙地找到了这二者之间的类似处。“你能够把内核看做是一直对申请进行响应的服务器,这些申请可能来自在 CPU 上执行的过程,也可能来自收回中断的外部设备。老板的申请相当于中断,而顾客的申请相当于用户态过程收回的零碎调用”。

软中断和零碎调用一样,都是 CPU 进行掉以后用户态上下文,保留工作现场,而后陷入到内核态持续工作。二者的惟一区别是零碎调用是切换到同过程的内核态上下文,而软中断是则是切换到了另外一个内核过程 ksoftirqd 上。

而事实上,晚期的零碎调用也还真的是通过汇编指令 int(中断)来实现的,当用户态过程收回 int $0x80 指令时,CPU 切换到内核态并开始执行 system_call 函数。起初大家感觉零碎调用切实是太慢了,因为 int 指令要执行一致性和安全性查看。起初内核又该用了 Intel 提供的“疾速零碎调用”的 sysenter 指令,才算是和中断脱离了一点点干系。而软中断必须得进行这些查看,所以从这点上来看,中断的开销应该是比零碎调用的开销要多的。

依据前文的试验后果,零碎调用开销是 200ns 起步。没看过这个文章的同学能够关注我,而后从历史文章里找。

2. 和过程上下文切换开销比照

和过程上下文切换比拟起来,过程上下文切换是从用户过程 A 切换到了用户过程 B。而软中断切换是从用户过程 A 切换到了内核线程 ksoftirqd 上。
而 ksoftirqd 作为一个内核管制门路,其处理程序比一个用户过程要轻量,所以上下文切换开销绝对比过程切换要稍一些。大家感兴趣的,能够持续浏览《深刻了解 Linux 内核》的 - 第五章。

依据前文的试验后果,过程上下文切换开销是 3us-5us。没看过这个文章的同学能够关注我,而后从历史文章里找。

相干 Linux 命令

  • top: si 列展现软中断造成 CPU 开销
  • vmstat 1:in 列每秒展现软中断次数
  • cat /proc/softirqs:展现所有软中断产生的总数,包含 TIMER、NET_TX、NET_RX 等


开发内功修炼之 CPU 篇专辑:

  • 1. 你认为你的多核 CPU 都是真核吗?多核“假象”
  • 2. 据说你只知内存,而不知缓存?CPU 示意很伤心!
  • 3.TLB 缓存是个神马鬼,如何查看 TLB miss?
  • 4. 过程 / 线程切换到底须要多少开销?
  • 5. 协程到底比线程牛在什么中央?
  • 6. 软中断会吃掉你多少 CPU?
  • 7. 一次零碎调用开销到底有多大?
  • 8. 一次简略的 php 申请 redis 会有哪些开销?
  • 9. 函数调用太多了会有性能问题吗?

我的公众号是「开发内功修炼」,在这里我不是单纯介绍技术实践,也不只介绍实践经验。而是把实践与实际联合起来,用实际加深对实践的了解、用实践进步你的技术实际能力。欢送你来关注我的公众号,也请分享给你的好友~~~

退出移动版