操作系统 / 系统课时

用 perf 观察缺页热点

用 perf 观察缺页热点

perf 可以先用计数器判断进程是否频繁缺页,再用采样把缺页集中到具体函数。排查时不要只盯总数:minor fault 通常不需要存储 I/O,而 major fault 可能让线程等待数据进入内存,两者对性能的意义不同。

学习目标

  • 用 perf stat 同时观察 page fault、minor fault 和 major fault
  • 用 perf record 与 perf report 找出缺页集中出现的函数
  • 根据缺页类型、发生频率和业务延迟判断是否值得继续优化

先用 stat 判断有没有问题

Linux 的 perf 软件事件中,page-faults 是总缺页计数,minor-faults 表示不需要从存储设备读取页面即可完成的缺页,major-faults 表示处理过程中需要把页面从后备存储带入内存的缺页。

minor fault 很常见,例如匿名映射首次写入、写时复制、已经在页缓存中的文件页建立页表映射。它们有 CPU 和内核路径开销,但不能仅凭数量高就认定存在故障。major fault 通常更值得关注,因为它可能直接放大请求尾延迟。

下面构造一个匿名映射,并逐页写入,让 touch_region 成为稳定的 minor fault 热点;随后先计数,再采样。

bash
cat > /tmp/fault-hotspot.c <<'EOF'
#define _GNU_SOURCE
#include <stdio.h>
#include <stdlib.h>
#include <sys/mman.h>
#include <unistd.h>

__attribute__((noinline))
static void touch_region(char *p, size_t bytes, size_t page_size) {
    for (size_t i = 0; i < bytes; i += page_size) {
        p[i] = 1;  /* 每个新匿名页第一次写入时通常触发 minor fault */
    }
}

int main(void) {
    const size_t bytes = 128UL * 1024 * 1024;

    /* 用实际页大小作为步长,避免把 4 KiB 写死。 */
    long page_size = sysconf(_SC_PAGESIZE);
    if (page_size <= 0) {
        perror("sysconf");
        return 1;
    }

    /* 匿名映射建立地址范围,但物理页通常在首次触碰时才准备。 */
    char *p = mmap(NULL, bytes, PROT_READ | PROT_WRITE,
                   MAP_PRIVATE | MAP_ANONYMOUS, -1, 0);
    if (p == MAP_FAILED) {
        perror("mmap");
        return 1;
    }

    /* 把 fault 集中在一个不可内联函数里,便于 perf report 聚合符号。 */
    touch_region(p, bytes, (size_t)page_size);
    printf("touched=%zu bytes\n", bytes);

    if (munmap(p, bytes) == -1) {
        perror("munmap");
        return 1;
    }
    return 0;
}
EOF

cc -std=gnu11 -Wall -Wextra -O0 -g -fno-omit-frame-pointer /tmp/fault-hotspot.c -o /tmp/fault-hotspot
perf stat -e page-faults,minor-faults,major-faults -- /tmp/fault-hotspot
perf record -q -e page-faults:u -g -- /tmp/fault-hotspot
perf report --stdio --sort symbol --percent-limit 1

预期输出

text
touched=134217728 bytes
<COUNT>      page-faults
<COUNT>      minor-faults
<COUNT>      major-faults
...
touched=134217728 bytes
Overhead  Symbol
<XX.XX>%  [.] touch_region
...

<COUNT> 与 <XX.XX> 会随内核、运行环境、动态链接器和页大小变化。这个示例的匿名页首次写入通常以 minor fault 为主;如果系统同时发生其他装载行为,也可能看到少量额外事件。

再用 record 找到缺页热点

perf stat 只能回答“发生了多少次”,不能告诉你“在哪个函数发生”。perf record -e page-faults:u -g 会对用户态缺页事件采样,并记录调用栈;perf report 再把样本按符号聚合。

示例里 touch_region 按页访问新匿名内存,因此它应成为主要热点。真实服务中,如果热点集中在某个解析、缓存构建、内存映射扫描或大对象初始化函数,就可以继续检查该函数是否在反复创建映射、触碰大量冷页,或把本应复用的内存变成一次性工作集。

怎样判断缺页是否值得优化

判断缺页不能只看绝对计数,要结合类型、速率和业务影响。

  • minor fault 多但运行很快:常见于首次触碰大块匿名内存或 COW。若它只发生在启动阶段,且不影响关键请求,通常无需处理。
  • minor fault 持续出现在请求热路径:即使没有磁盘 I/O,也会增加内核路径、页表更新和 TLB 相关成本。此时应看热点是否来自重复分配、短命大对象或反复映射。
  • major fault 出现在延迟敏感路径:优先级通常更高。它意味着处理 fault 时需要等待后备存储,应该继续关联文件访问、内存压力、回收与存储延迟。
  • 总缺页数高但热点分散:先按单位时间、每请求或每处理数据量归一化,再决定是否值得优化,避免把正常的 demand paging 当成异常。

一个实用判断顺序是:先用 perf stat 确认 minor/major 的量级,再用 perf record 找到具体函数,最后把热点与启动阶段、请求路径和延迟峰值对齐。只有“缺页发生在关键路径并造成可观测成本”时,优化才有明确目标。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

用 perf 观察缺页热点

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通