操作系统 / 系统课时

malloc 分配后为何 RSS 还没涨

malloc 分配后为何 RSS 还没涨

调用 malloc 成功只说明进程拿到了一段可用虚拟地址,并不代表同等大小的物理页已经进入 RSS。Linux 会把地址空间分配与物理页提交拆开处理,真正的 RSS 增长通常发生在进程首次访问页面之后。

学习目标

  • 理解 malloc、虚拟地址空间和 RSS 之间的关系
  • 解释首次触页为什么会触发缺页并分配物理页
  • 能用一个小实验观察分配前、分配后和触页后的差异

malloc 先解决地址空间问题

在 Linux 上,glibc 的 malloc 会从已有 arena 取空闲块,或通过 brk、mmap 等方式扩大可用虚拟地址空间。无论走哪条路径,返回指针时都不要求内核立刻为整段区域准备物理页。

因此,较大的分配常见现象是 VmSize 明显增加,而 VmRSS 只增加少量甚至几乎不变。分配器自身会触碰元数据,所以实际数字不会完全静止;而且已有 arena 足够时,连 VmSize 也可能不明显变化。

首次触页才让物理页进入 RSS

进程第一次写入某个尚未建立物理映射的匿名页时,CPU 会触发缺页异常。内核确认地址合法后,为它分配物理页、清零并建立页表映射,随后指令继续执行。这个物理页此时才计入进程 RSS。

malloc 到 RSS 增长的首次触页链路

这种机制称为按需分页。它允许进程先得到很大的虚拟地址范围,只为真正访问过的页面付出物理内存成本;同时也意味着 malloc 成功不能单独证明后续所有页面都一定能获得物理内存。

用实验观察三阶段变化

下面的脚本生成一个小型 C 程序,申请 64 MiB 内存,然后每隔一个系统页写入 1 字节。编译使用 -O0,避免演示中的触页写入被优化掉。

bash
cat > /tmp/malloc_rss.c <<'EOF'
#include <stdio.h>
#include <stdlib.h>
#include <string.h>
#include <unistd.h>

static void show_mem(const char *label) {
    FILE *f = fopen("/proc/self/status", "r");
    char line[256];

    if (f == NULL) {
        perror("fopen");
        exit(1);
    }

    printf("%s\n", label);
    while (fgets(line, sizeof line, f) != NULL) {
        if (strncmp(line, "VmSize:", 7) == 0 ||
            strncmp(line, "VmRSS:", 6) == 0) {
            fputs(line, stdout);
        }
    }
    fclose(f);
}

int main(void) {
    const size_t bytes = 64UL * 1024 * 1024;
    const long page_size = sysconf(_SC_PAGESIZE);

    show_mem("before");

    volatile unsigned char *p = malloc(bytes);
    if (p == NULL) {
        perror("malloc");
        return 1;
    }

    show_mem("after malloc");

    /* 每页写 1 字节,强制这段匿名内存逐页建立物理映射。 */
    for (size_t i = 0; i < bytes; i += (size_t)page_size) {
        p[i] = 1;
    }

    show_mem("after touch");
    free((void *)p);
    return 0;
}
EOF
cc -O0 -Wall -Wextra /tmp/malloc_rss.c -o /tmp/malloc_rss
/tmp/malloc_rss

预期输出

text
before
VmSize:     <VSZ_BEFORE> kB
VmRSS:      <RSS_BEFORE> kB
after malloc
VmSize:     <VSZ_AFTER_MALLOC> kB
VmRSS:      <RSS_AFTER_MALLOC> kB
after touch
VmSize:     <VSZ_AFTER_TOUCH> kB
VmRSS:      <RSS_AFTER_TOUCH> kB

具体数值与 glibc 分配策略、页大小和运行环境有关。应关注趋势:分配后虚拟地址规模通常先增长,逐页写入后 RSS 再明显上升,增量通常接近真正触碰过的页总量。

观察结果时的三个边界

只读取尚未写入的匿名区域时,部分架构和内核路径可能使用共享零页,因此 RSS 行为与“逐页写入”不同。若要稳定演示物理页分配,应像上例一样进行写操作。

free 之后 RSS 也不一定立刻下降。分配器可能把小块内存保留在 arena 中供后续复用;较大的 mmap 分配更可能在释放时归还给内核。是否下降取决于分配器策略,而不是 free 这个调用本身的语义。

排查“VSZ 很大但 RSS 不高”时,应把它理解为地址空间已经预留或映射,但许多页尚未实际驻留。只有把缺页次数、RSS 变化和真实访问模式放在一起看,才能判断内存是否真的被物理提交。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

malloc 分配后为何 RSS 还没涨

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通