百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

怒啃 24 小时,终于搞懂linux系统上下文切换

off999 2025-03-11 19:43 16 浏览 0 评论

对于服务器系统来说,上下文切换也是影响系统性能的一个重要因素。深入理解上下文切换的原理,有利于我们做好性能优化工作。今天我将带大家了解下上下文切换的几种情形,以及其背后发生切换的具体信息,接着介绍一些监测上下文切换指标的工具,最后总结一些上下文切换异常可能得场景。

什么是上下文切换?

我们知道 Linux 是一个多任务操作系统,它能支持远大于 CPU 数量的任务同时运行。但实际上同一时刻只会有 CPU 数量的进程在运行,等 CPU 时间片到了之后,进程调度器就会把 CPU 资源分配给其他进程。

在这个过程中就会涉及到进程之间的切换,这时候就需要将当前进程的上下文信息保存下来,随后加载被调度进程的上下文信息,这就是上下文切换。

这里所说的上下文信息,既包括虚拟内存、栈、全局变量等用户态的资源,也包括内核堆栈、寄存器等内核态的资源。不同类型的上下文切换,会涉及到不同类型资源的切换,例如:同一进程不同线程的切换,只需要切换内核态的资源,而不需要切换用户态的资源。

上下文切换类型

上下文还分为了三种类型,分别是:

  • 进程上下文切换
  • 线程上下文切换
  • 中断上下文切换

进程上下文切换

进程上下文切换指的是不同进程之间发生切换。一般来说,进程被调度有如下几个时机:

  1. 某个进程时间片耗尽,会被系统挂起,切换到其他等待 CPU 的进程。
  2. 进程所需系统资源不足,需要等到资源满足时才可运行,此时会被挂起,其他进程会被调度。
  3. 进程通过 sleep 方法主动挂起,其他进程就有机会被调度。
  4. 有更高优先级的进程,当前进程会被挂起,高优先级进程会被调度。
  5. 硬件中断时,CPU 上的进程会被中断挂起,转而执行内核中的中断服务程序。

当发生如上几种情况的时候,就会发生进程调度,进而发生进程上下文切换。

线程上下文切换

我们都知道进程是资源分配的基本单位,线程是调度的基本单位,进程只是给线程提供了虚拟内存等资源。而线程上下文切换,就可以分为两种情况:

  • 进程调度前后的两个线程,属于同一进程。此时因为资源共享,所以在切换的时候虚拟内存等这些资源就不需要变化,只需要切换线程的私有数据、寄存器等不共享的数据。
  • 进程调度前后的两个线程,不属于同一进程。这时候因为资源部共享,所以切换过程和进程上下文切换是一样的。

所以你会发现同进程内的线程切换,要比多进程间的切换消耗更少的资源,这其实就是多线程比起多进程的一个优势。

中断上下文切换

中断上下文切换指的是为了响应硬件的事件,中断处理会打断进程的正常调度和执行,转而调用中断处理程序,响应设备事件。而在打断其他进程时,就需要将当前的状态保存下来。这样在中断结束后,进程仍然可以从原来的状态恢复运行。

中断上下文切换,并不需要保存和恢复进程的虚拟内存等用户态资源,只需要处理 CPU 寄存器、内核堆栈等内核态的资源即可。

分析工具

查看系统的上下文切换情况,有三个工具可以使用,分别是:vmstat 命令、pidstat 命令、/proc/interrupts 文件。

vmstat 命令

vmstat 是一个常用的系统性能分析工具,主要用来分析系统的内存使用情况,也常用来分析 CPU 上下文切换和中断的次数。该命令的语法格式为:

vmstat <选项> <时间间隔> <报告次数>

其中常用的选项有:

-a:显示活动内页;-f:显示启动后创建的进程总数;-m:显示 slab 信息;-n:头信息仅显示一次;-s:以表格方式显示事件计数器和内存状态;-d:报告磁盘状态;-p:显示指定的硬盘分区状态;-S:输出信息的单位。

我们执行 vmstat 5 命令后,会每隔 5 秒输出一次结果,如下所示。

procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu-----
 r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs us sy id wa st
 0  0      0 6893400   2352 563768    0    0     2   425  153   32  1  3 96  0  0

其中与上下文相关的 4 列内容如下:

  • cs(context switch)是每秒上下文切换的次数。
  • in(interrupt)则是每秒中断的次数。
  • r(Running or Runnable)是就绪队列的长度,也就是正在运行和等待 CPU 的进程数。
  • b(Blocked)则是处于不可中断睡眠状态的进程数。

可以看到上面输出中上下文切换次数 cs 是 32 次,而系统中断次数 in 是 153 次,而就绪队列长度 r 和不可中断状态进程数 b 都是 0。

pidstat 命令

vmstat 只给出了系统总体的上下文切换情况,要想查看每个进程的详细情况,就需要使用我们前面提到过的 pidstat 了。给它加上 -w 选项,你就可以查看每个进程上下文切换的情况了。 例如执行如下命令,我们可以得到每个进程的上下文切换情况了。

// 每隔 5 秒输出一次结果
// -w 表示显示每个进程的上下文切换情况
[root@iZwz92ezhi90syoqbgjgn1Z ~]# pidstat -w 5
Linux 4.18.0-348.7.1.el8_5.x86_64 (iZwz92ezhi90syoqbgjgn1Z)  23/08/22  _x86_64_ (4 CPU)

15:04:39      UID       PID   cswch/s nvcswch/s  Command
15:04:44        0         1      0.20      0.00  systemd
15:04:44        0        11     27.94      0.00  rcu_sched
15:04:44        0       497     19.56      0.00  xfsaild/vda3
15:04:44        0       603      0.20      0.00  systemd-journal
15:04:44        0       829      0.40      0.00  sssd_be
15:04:44        0       831      1.60      0.00  sssd_nss
15:04:44        0      3931      0.40      0.00  kworker/2:0-mm_percpu_wq
15:04:44        0      3998      0.40      0.00  kworker/1:0-mm_percpu_wq
15:04:44        0      4005      0.20      0.00  kworker/u8:0-flush-253:0
15:04:44        0      4021      0.80      0.00  kworker/3:2-mm_percpu_wq
15:04:44        0      4037      5.99      0.00  kworker/0:0-events

上述结果中的 cswch 与 nvcswch 是重点关注的对象。cswch 表示每秒自愿上下文切换(voluntary context switches)的次数,nvcswch 表示每秒非自愿上下文切换(non voluntary context switches)的次数。

所谓自愿上下文切换,是指进程无法获取所需资源,导致的上下文切换。比如说, I/O、内存等系统资源不足时,就会发生自愿上下文切换。

而非自愿上下文切换,则是指进程由于时间片已到等原因,被系统强制调度,进而发生的上下文切换。比如说,大量进程都在争抢 CPU 时,就容易发生非自愿上下文切换。

/proc/interrupts 文件

我们可以通过 vmstat 获取中断的次数,但是我们却无法获取中断类型。实际上我们可以通过 /proc/interrupts 文件获取中断的详细信息。/proc 实际上是 Linux 的一个虚拟文件系统,用于内核空间与用户空间之间的通信。/proc/interrupts 就是这种通信机制的一部分,提供了一个只读的中断使用情况。

我们可以通过如下命令,动态观察中断的变化情况:

# -d 参数表示高亮显示变化的区域
$ watch -d cat /proc/interrupts
           CPU0       CPU1
...
RES:    4385721    4430589    3732298    4259089   Rescheduling interrupts
...

通过这种方式,我们就可以知道具体是哪种中断类型出现异常,从而定位到具体的资源。

相关视频推荐

360度无死角讲解进程管理,调度器的5种实现

聊聊腾讯面试linux后台开发被问到的多线程问题

需要C/C++ Linux服务器架构师学习资料加qun812855908获取(资料包括C/C++,Linux,golang技术,Nginx,ZeroMQ,MySQL,Redis,fastdfs,MongoDB,ZK,流媒体,CDN,P2P,K8S,Docker,TCP/IP,协程,DPDK,ffmpeg等),免费分享

如何排查异常?

今天我们深入了解了一下上下文切换这个指标,但每秒上下文切换多少次才算正常呢?

这个数值取决于系统本身的 CPU 性能。如果系统的上下文切换次数比较稳定,那么从数百到一万以内,都应该算是正常的。但当上下文切换次数超过一万次,或者切换次数出现数量级的增长时,就很可能已经出现了性能问题。

具体遇到问题的时候,需要根据变化的上下文切换类型,再做具体的分析。例如:

  • 自愿上下文切换变多了,说明进程都在等待资源,有可能发生了 I/O 等其他问题。
  • 非自愿上下文切换变多了,说明进程都在被强制调度,也就是都在争抢 CPU,说明 CPU 的确成了瓶颈。
  • 中断次数变多了,说明 CPU 被中断处理程序占用,还需要通过查看 /proc/interrupts 文件来分析具体的中断类型。

总结

首先,我们先介绍了上下文切换的概念,以及上下文切换可能会包含用户态资源和内核态资源。

接着,我们介绍了三种上下文切换类型,即:进程上下文切换、线程上下文切换、中断上下文切换,并分析其切换包括的资源类型。

接着,我们介绍了 vmstat 命令、pidstat 命令、/proc/interrupts 三种分析工具。其中 vmstat 命令用户查看系统整体上下文切换情况,pidstat 命令用户查看进程的上下文切换情况,/proc/interrupts 文件用户查看中断类型及详细情况。

最后,解释了合理的上下文切换次数应该是数百到一万每秒以内。但具体的问题排查,还需要根据上下文切换类型去分析。

相关推荐

Python钩子函数实现事件驱动系统(created钩子函数)

钩子函数(HookFunction)是现代软件开发中一个重要的设计模式,它允许开发者在特定事件发生时自动执行预定义的代码。在Python生态系统中,钩子函数广泛应用于框架开发、插件系统、事件处理和中...

Python函数(python函数题库及答案)

定义和基本内容def函数名(传入参数):函数体return返回值注意:参数、返回值如果不需要,可以省略。函数必须先定义后使用。参数之间使用逗号进行分割,传入的时候,按照顺序传入...

Python技能:Pathlib面向对象操作路径,比os.path更现代!

在Python编程中,文件和目录的操作是日常中不可或缺的一部分。虽然,这么久以来,钢铁老豆也还是习惯性地使用os、shutil模块的函数式API,这两个模块虽然功能强大,但在某些情况下还是显得笨重,不...

使用Python实现智能物流系统优化与路径规划

阅读文章前辛苦您点下“关注”,方便讨论和分享,为了回馈您的支持,我将每日更新优质内容。在现代物流系统中,优化运输路径和提高配送效率是至关重要的。本文将介绍如何使用Python实现智能物流系统的优化与路...

Python if 语句的系统化学习路径(python里的if语句案例)

以下是针对Pythonif语句的系统化学习路径,从零基础到灵活应用分为4个阶段,包含具体练习项目和避坑指南:一、基础认知阶段(1-2天)目标:理解条件判断的逻辑本质核心语法结构if条件:...

[Python] FastAPI基础:Path路径参数用法解析与实例

查询query参数(上一篇)路径path参数(本篇)请求体body参数(下一篇)请求头header参数本篇项目目录结构:1.路径参数路径参数是URL地址的一部分,是必填的。路径参...

Python小案例55- os模块执行文件路径

在Python中,我们可以使用os模块来执行文件路径操作。os模块提供了许多函数,用于处理文件和目录路径。获取当前工作目录(CurrentWorkingDirectory,CWD):使用os....

python:os.path - 常用路径操作模块

应该是所有程序都需要用到的路径操作,不废话,直接开始以下是常用总结,当你想做路径相关时,首先应该想到的是这个模块,并知道这个模块有哪些主要功能,获取、分割、拼接、判断、获取文件属性。1、路径获取2、路...

原来如此:Python居然有6种模块路径搜索方式

点赞、收藏、加关注,下次找我不迷路当我们使用import语句导入模块时,Python是怎么找到这些模块的呢?今天我就带大家深入了解Python的6种模块路径搜索方式。一、Python模块...

每天10分钟,python进阶(25)(python进阶视频)

首先明确学习目标,今天的目标是继续python中实例开发项目--飞机大战今天任务进行面向对象版的飞机大战开发--游戏代码整编目标:完善整串代码,提供完整游戏代码历时25天,首先要看成品,坚持才有收获i...

python 打地鼠小游戏(打地鼠python程序设计说明)

给大家分享一段AI自动生成的代码(在这个游戏中,玩家需要在有限时间内打中尽可能多的出现在地图上的地鼠),由于我现在用的这个电脑没有安装sublime或pycharm等工具,所以还没有测试,有兴趣的朋友...

python线程之十:线程 threading 最终总结

小伙伴们,到今天threading模块彻底讲完。现在全面总结threading模块1、threading模块有自己的方法详细点击【threading模块的方法】threading模块:较低级...

Python信号处理实战:使用signal模块响应系统事件

信号是操作系统用来通知进程发生了某个事件的一种异步通信方式。在Python中,标准库的signal模块提供了处理这些系统信号的机制。信号通常由外部事件触发,例如用户按下Ctrl+C、子进程终止或系统资...

Python多线程:让程序 “多线作战” 的秘密武器

一、什么是多线程?在日常生活中,我们可以一边听音乐一边浏览新闻,这就是“多任务处理”。在Python编程里,多线程同样允许程序同时执行多个任务,从而提升程序的执行效率和响应速度。不过,Python...

用python写游戏之200行代码写个数字华容道

今天来分析一个益智游戏,数字华容道。当初对这个游戏颇有印象还是在最强大脑节目上面,何猷君以几十秒就完成了这个游戏。前几天写2048的时候,又想起了这个游戏,想着来研究一下。游戏玩法用尽量少的步数,尽量...

取消回复欢迎 发表评论: