操作系统 / 系统课时
用 perf 观察缺页热点
用 perf 观察缺页热点
perf 可以先用计数器判断进程是否频繁缺页,再用采样把缺页集中到具体函数。排查时不要只盯总数:minor fault 通常不需要存储 I/O,而 major fault 可能让线程等待数据进入内存,两者对性能的意义不同。
学习目标
- 用
perf stat同时观察 page fault、minor fault 和 major fault - 用
perf record与perf report找出缺页集中出现的函数 - 根据缺页类型、发生频率和业务延迟判断是否值得继续优化
先用 stat 判断有没有问题
Linux 的 perf 软件事件中,page-faults 是总缺页计数,minor-faults 表示不需要从存储设备读取页面即可完成的缺页,major-faults 表示处理过程中需要把页面从后备存储带入内存的缺页。
minor fault 很常见,例如匿名映射首次写入、写时复制、已经在页缓存中的文件页建立页表映射。它们有 CPU 和内核路径开销,但不能仅凭数量高就认定存在故障。major fault 通常更值得关注,因为它可能直接放大请求尾延迟。
下面构造一个匿名映射,并逐页写入,让 touch_region 成为稳定的 minor fault 热点;随后先计数,再采样。
cat > /tmp/fault-hotspot.c <<'EOF'
#define _GNU_SOURCE
#include <stdio.h>
#include <stdlib.h>
#include <sys/mman.h>
#include <unistd.h>
__attribute__((noinline))
static void touch_region(char *p, size_t bytes, size_t page_size) {
for (size_t i = 0; i < bytes; i += page_size) {
p[i] = 1; /* 每个新匿名页第一次写入时通常触发 minor fault */
}
}
int main(void) {
const size_t bytes = 128UL * 1024 * 1024;
/* 用实际页大小作为步长,避免把 4 KiB 写死。 */
long page_size = sysconf(_SC_PAGESIZE);
if (page_size <= 0) {
perror("sysconf");
return 1;
}
/* 匿名映射建立地址范围,但物理页通常在首次触碰时才准备。 */
char *p = mmap(NULL, bytes, PROT_READ | PROT_WRITE,
MAP_PRIVATE | MAP_ANONYMOUS, -1, 0);
if (p == MAP_FAILED) {
perror("mmap");
return 1;
}
/* 把 fault 集中在一个不可内联函数里,便于 perf report 聚合符号。 */
touch_region(p, bytes, (size_t)page_size);
printf("touched=%zu bytes\n", bytes);
if (munmap(p, bytes) == -1) {
perror("munmap");
return 1;
}
return 0;
}
EOF
cc -std=gnu11 -Wall -Wextra -O0 -g -fno-omit-frame-pointer /tmp/fault-hotspot.c -o /tmp/fault-hotspot
perf stat -e page-faults,minor-faults,major-faults -- /tmp/fault-hotspot
perf record -q -e page-faults:u -g -- /tmp/fault-hotspot
perf report --stdio --sort symbol --percent-limit 1预期输出
touched=134217728 bytes
<COUNT> page-faults
<COUNT> minor-faults
<COUNT> major-faults
...
touched=134217728 bytes
Overhead Symbol
<XX.XX>% [.] touch_region
...<COUNT> 与 <XX.XX> 会随内核、运行环境、动态链接器和页大小变化。这个示例的匿名页首次写入通常以 minor fault 为主;如果系统同时发生其他装载行为,也可能看到少量额外事件。
再用 record 找到缺页热点
perf stat 只能回答“发生了多少次”,不能告诉你“在哪个函数发生”。perf record -e page-faults:u -g 会对用户态缺页事件采样,并记录调用栈;perf report 再把样本按符号聚合。
示例里 touch_region 按页访问新匿名内存,因此它应成为主要热点。真实服务中,如果热点集中在某个解析、缓存构建、内存映射扫描或大对象初始化函数,就可以继续检查该函数是否在反复创建映射、触碰大量冷页,或把本应复用的内存变成一次性工作集。
怎样判断缺页是否值得优化
判断缺页不能只看绝对计数,要结合类型、速率和业务影响。
- minor fault 多但运行很快:常见于首次触碰大块匿名内存或 COW。若它只发生在启动阶段,且不影响关键请求,通常无需处理。
- minor fault 持续出现在请求热路径:即使没有磁盘 I/O,也会增加内核路径、页表更新和 TLB 相关成本。此时应看热点是否来自重复分配、短命大对象或反复映射。
- major fault 出现在延迟敏感路径:优先级通常更高。它意味着处理 fault 时需要等待后备存储,应该继续关联文件访问、内存压力、回收与存储延迟。
- 总缺页数高但热点分散:先按单位时间、每请求或每处理数据量归一化,再决定是否值得优化,避免把正常的 demand paging 当成异常。
一个实用判断顺序是:先用 perf stat 确认 minor/major 的量级,再用 perf record 找到具体函数,最后把热点与启动阶段、请求路径和延迟峰值对齐。只有“缺页发生在关键路径并造成可观测成本”时,优化才有明确目标。