C / C++ / 系统课时
top里怎么看线程级CPU
top里怎么看线程级CPU
当一个多线程进程 CPU 很高时,进程总占用只能说明“这个程序很忙”,却不能指出是哪条线程造成的。本节使用 top 的线程模式拆开各个 TID,识别单线程热点、忙等和多线程同时消耗 CPU 的情况。
学习目标
- 使用
top按线程粒度查看目标进程的 CPU 使用率 - 根据线程名、TID、状态和
%CPU找到持续热点线程 - 区分真正的 CPU 计算热点与等待、阻塞等低 CPU 问题
为什么要切到线程视图
普通 top 默认主要按进程展示,一个进程的 %CPU 可能是多个线程共同贡献的。例如一个进程达到约 200% CPU,可能是两个线程各占满一个逻辑 CPU,也可能是更多线程在不同时间片上共同消耗。
线程模式会把同一进程中的各个内核线程分别列出。此时 PID/TID、线程名和 %CPU 可以直接关联,排障目标也就从“哪个进程高”缩小成“哪条线程高”。
构造一个单线程热点
下面的程序创建两条工作线程:worker-hot 持续执行计算,worker-idle 主要休眠。随后使用 top 的批处理线程模式连续采样两次,便于看到第二个采样周期中的 CPU 差异。
cat >/tmp/top_thread_demo.cpp <<'CPP'
#include <atomic>
#include <chrono>
#include <cstdint>
#include <pthread.h>
#include <thread>
std::atomic<bool> stop{false};
void hot_worker() {
pthread_setname_np(pthread_self(), "worker-hot");
// volatile 保留计算负载,模拟持续占用一个 CPU 的工作线程。
volatile std::uint64_t value = 1;
while (!stop.load(std::memory_order_relaxed)) {
value = value * 1664525u + 1013904223u;
}
}
void idle_worker() {
pthread_setname_np(pthread_self(), "worker-idle");
// 周期休眠,模拟主要等待而不是执行计算的线程。
while (!stop.load(std::memory_order_relaxed)) {
std::this_thread::sleep_for(std::chrono::milliseconds(100));
}
}
int main() {
std::thread hot(hot_worker);
std::thread idle(idle_worker);
std::this_thread::sleep_for(std::chrono::seconds(8));
stop.store(true, std::memory_order_relaxed);
hot.join();
idle.join();
}
CPP
g++ -std=c++17 -O2 -pthread /tmp/top_thread_demo.cpp -o /tmp/top_thread_demo
/tmp/top_thread_demo &
pid=$!
sleep 1
top -H -b -d 1 -n 2 -p "$pid" | grep -E 'PID|worker-hot|worker-idle|top_thread_demo'
wait "$pid"预期输出
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
<TID_HOT> <USER> <PR> <NI> <VIRT> <RES> <SHR> R <HIGH_CPU> <MEM> <TIME> worker-hot
<TID_IDLE> <USER> <PR> <NI> <VIRT> <RES> <SHR> S <LOW_CPU> <MEM> <TIME> worker-idle<TID_HOT>、<TID_IDLE>、CPU 百分比、内存和时间值都会随机器与采样时刻变化。正常情况下,第二个采样周期里 worker-hot 的 %CPU 会明显高于 worker-idle,从而形成可识别的单线程热点。
在线上 top 中快速定位
top 的 -H 选项表示显示线程,-p 用来限制观察目标进程。交互模式下也可以使用 H 切换线程显示,并用 P 按 CPU 使用率排序。排查时不要只记录排名第一的瞬时值,应连续观察多个刷新周期,看同一个 TID 是否稳定处在前列。
线程名非常有价值。C/C++ 服务如果通过 pthread_setname_np 等方式给工作线程设置职责名,就能把热点直接关联到线程池、网络循环或后台任务;如果所有线程都叫相同的进程名,则至少应记录 TID,供后续采样器或调试器关联。
怎样判断忙等和正常计算
一条线程持续接近占满单个逻辑 CPU,同时状态长期为 R,通常说明它正在执行计算或反复获得运行时间。如果业务吞吐没有对应增长,就要警惕无条件循环、自旋锁竞争、失败后的高频重试等忙等模式。
如果多个工作线程都保持较高 %CPU,更可能是并行计算或全局负载确实升高;如果进程整体出现卡顿,但绝大多数线程 CPU 很低并处于休眠状态,则问题可能在锁等待、条件变量、网络或 I/O,继续盯着 CPU 排名不会得到根因。
把热点 TID 带到下一种工具
确认热点线程后,应记录它的 TID、线程名、状态以及连续几个周期的 %CPU。如果热点稳定存在,可继续用性能采样工具查看函数级消耗;如果 CPU 呈周期性尖峰,则需要延长采样窗口并和业务请求、定时任务或重试日志对齐。
top 最适合完成第一层筛选:判断高 CPU 是单线程还是多线程造成,并锁定具体 TID。得到这个定位结果后,再进入调用栈、锁竞争或函数热点分析,排障会比直接对整个进程猜测高效得多。