可观测性与稳定性 / 系统课时
分析 CPU 性能瓶颈
分析 CPU 性能瓶颈
本节学习如何使用 Linux 常用工具定位 CPU 相关性能问题,通过观察使用率、运行队列和上下文切换等指标判断 CPU 是否成为系统瓶颈。
学习目标
- 掌握 top、vmstat、mpstat 的 CPU 分析方法
- 理解 CPU 使用率、运行队列和上下文切换指标
- 能够根据监控结果判断 CPU 瓶颈类型
从 CPU 现象定位问题
CPU 瓶颈通常表现为请求响应变慢、任务执行时间增加或系统负载升高。但 CPU 使用率高并不直接代表问题,需要进一步判断是计算压力、线程竞争还是调度开销。
分析 CPU 性能时,需要关注几个关键指标:用户态 CPU 使用时间、内核态 CPU 使用时间、等待时间、运行队列长度以及上下文切换次数。
使用 top 查看实时状态
top 是最常用的实时观察工具,可以快速查看 CPU 总体使用情况以及占用 CPU 较高的进程。
bash
top -b -n 1 | head -20预期输出
text
top - <TIME> up <TIME>, 1 user, load average: 0.45, 0.32, 0.28
%Cpu(s): 35.0 us, 5.0 sy, 0.0 ni, 60.0 id
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
1234 app 20 0 512000 80000 12000 R 85.0 2.0 10:20 java输出中的 us 表示用户态消耗,sy 表示内核态消耗,id 表示空闲比例。如果某个进程长期占用大量 CPU,需要继续结合程序行为分析。
使用 vmstat 分析调度压力
vmstat 可以观察 CPU 调度和上下文切换情况,适合判断系统是否存在运行队列堆积。
bash
vmstat 1 5预期输出
text
procs -----------memory---------- ---swap-- -----io---- -system-- ------cpu-----
r b swpd free si so bi bo in cs us sy id wa st
2 0 0 204800 0 0 0 0 1200 2500 70 10 18 2 0r 表示等待 CPU 的运行任务数量。如果长期高于 CPU 核心数量,说明存在 CPU 调度压力。cs 表示上下文切换次数,过高可能意味着线程频繁切换导致额外开销。
使用 mpstat 分析多核 CPU
多核服务器中,单看整体 CPU 使用率可能隐藏某个核心过载的问题。mpstat 可以查看每个 CPU 核心的状态。
bash
mpstat -P ALL 1 3预期输出
text
CPU %usr %sys %idle
all 65.0 10.0 25.0
0 90.0 5.0 5.0
1 40.0 15.0 45.0如果某个核心长期接近满载,而其他核心较空闲,可能是线程绑定、任务分配不均或程序并行能力不足导致。
判断 CPU 瓶颈类型
CPU 问题通常可以分为三类。
| 现象 | 可能原因 | 分析方向 |
|---|---|---|
| 用户态 CPU 高 | 业务计算量大 | 优化算法、减少计算 |
| 内核态 CPU 高 | 系统调用频繁 | 检查 IO、网络、锁竞争 |
| 运行队列高 | CPU 竞争严重 | 增加资源或降低任务压力 |
建立 CPU 排查流程
实际排查时,可以先使用 top 找到异常进程,再通过 vmstat 判断系统调度压力,最后使用 mpstat 确认是否存在核心不均衡。
掌握这些指标后,CPU 分析就不再是简单查看百分比,而是通过多个信号组合判断系统是否真正受 CPU 限制。
按自己的节奏,确认真正理解。