操作系统 / 系统课时

进程 RSS 持续上涨怎么查

进程 RSS 持续上涨怎么查

RSS 持续上涨并不等于“堆内存泄漏”。匿名堆、线程栈、文件映射、共享内存和分配器保留页都可能推高 RSS。排查时要先证明增长趋势,再用 smaps_rollup 判断增长属于哪类页面,继续下钻到具体 VMA,最后才把问题交给语言运行时或分配器定位调用点。

学习目标

  • 建立“趋势确认 → 页面类型 → VMA → 分配行为”的固定排查顺序。
  • 能用 /proc/<PID>/status、maps、smaps_rollup 和 smaps 区分匿名私有页与文件映射。
  • 能根据结果选择下一步的堆分析、运行时分析或映射生命周期检查,而不是只凭 RSS 判断泄漏。

先判定 RSS 到底在涨什么

第一步先回答两个问题:RSS 是否在相同负载下持续增加,以及增加的页主要是匿名私有页还是文件相关页。smaps_rollup 给出整个进程的汇总,适合快速看 Pss、Anonymous、Private_Dirty 与 Swap;maps 和逐段 smaps 再负责回答“增长落在哪个 VMA”。

RSS 持续上涨的定位路径

如果 Anonymous 和 Private_Dirty 与 RSS 同步增长,优先怀疑堆、匿名 mmap、运行时 arena 或栈等私有内存;如果 RSS 增长但 Private_Dirty 基本稳定,而某些文件映射的 Rss 增长,则应先检查文件映射和访问模式,而不是直接做 heap dump。

采集可对比的趋势线

下面的命令每 5 秒采集一次目标进程的 RSS,并同时读取 smaps_rollup 中的 PSS、匿名页、私有脏页和 Swap。把 <PID> 替换成真实进程号,连续观察一个完整业务周期。

bash
pid=<PID>
while kill -0 "$pid" 2>/dev/null; do
  ts=$(date +%FT%T%z)
  rss_kb=$(awk '/^VmRSS:/ {print $2}' "/proc/$pid/status")
  awk -v ts="$ts" -v pid="$pid" -v rss="$rss_kb" '
    /^Pss:/ { pss=$2 }
    /^Anonymous:/ { anon=$2 }
    /^Private_Dirty:/ { private_dirty=$2 }
    /^Swap:/ { swap=$2 }
    END {
      printf "%s pid=%s rss=%s kB pss=%s kB anon=%s kB private_dirty=%s kB swap=%s kB\n",
             ts, pid, rss, pss, anon, private_dirty, swap
    }
  ' "/proc/$pid/smaps_rollup"
  sleep 5
done

预期输出中的时间和数值会随目标进程变化;真正要比较的是多行之间的增长方向和斜率。

text
<TIME> pid=<PID> rss=<RSS_KB> kB pss=<PSS_KB> kB anon=<ANON_KB> kB private_dirty=<PRIVATE_DIRTY_KB> kB swap=<SWAP_KB> kB
<TIME> pid=<PID> rss=<LARGER_RSS_KB> kB pss=<PSS_KB> kB anon=<LARGER_ANON_KB> kB private_dirty=<LARGER_PRIVATE_DIRTY_KB> kB swap=<SWAP_KB> kB

只采一个瞬时值很容易误判。至少覆盖一次峰值请求、批处理或缓存预热过程,并把业务吞吐量一起对齐;如果负载本身持续增加,RSS 增长未必代表异常。

用 maps 和 smaps 找到增长 VMA

确认匿名页或私有脏页在涨后,下一步按 VMA 聚合 smaps。下面的命令输出每个映射的 Rss、Private_Dirty、Anonymous 和映射名称,再按 RSS 从大到小排序。

bash
awk '
  /^[0-9a-f]+-[0-9a-f]+ / {
    if (seen) {
      print rss, private_dirty, anon, name
    }
    rss=private_dirty=anon=0
    name = (NF >= 6) ? substr($0, index($0, $6)) : "[anonymous]"
    seen=1
    next
  }
  /^Rss:/ { rss=$2 }
  /^Private_Dirty:/ { private_dirty=$2 }
  /^Anonymous:/ { anon=$2 }
  END {
    if (seen) {
      print rss, private_dirty, anon, name
    }
  }
' /proc/<PID>/smaps | sort -nr -k1,1 | head -n 10

预期输出每行依次是 RSS_KB PRIVATE_DIRTY_KB ANON_KB MAPPING;实际映射名称和数值由进程决定。

text
<RSS_KB> <PRIVATE_DIRTY_KB> <ANON_KB> [heap]
<RSS_KB> <PRIVATE_DIRTY_KB> <ANON_KB> [anonymous]
<RSS_KB> <PRIVATE_DIRTY_KB> <ANON_KB> /<PATH>/<MAPPED_FILE>

如果 [heap] 或大型匿名 VMA 在多次快照中持续增长,问题已经从“进程 RSS 涨”缩小到“私有匿名内存在涨”。如果增长集中在具体文件映射,则检查 mmap 的生命周期、访问窗口与是否及时 munmap;如果是 /dev/shm 等共享内存,则应同时检查生产者和消费者的持有关系。

把 VMA 结果交给分配行为分析

/proc 能定位到“哪类页、哪个映射”在增长,但通常不能直接告诉你“哪一行代码分配了它”。当匿名私有页明确增长后,再进入应用层工具:C/C++ 服务优先使用当前分配器支持的 heap profiler;Go 查看 heap profile;JVM 区分 Java heap、direct buffer 与 native memory;Python 可用对象级或 tracemalloc 工具确认 Python 分配。

这里还要区分“泄漏”和“分配器保留”。有些分配器释放对象后不会立刻把页归还内核,因此业务对象数量已回落,RSS 仍可能维持高位。判断方法不是看单次 RSS,而是同时比较应用对象/堆指标与 Private_Dirty:如果对象量回落但私有页长期不降,继续检查 arena、碎片和回收策略。

修复后怎么验收

修复后使用与问题发生时相同的流量、批量大小和运行时长复测,比较的是 增长斜率是否消失,而不是要求 RSS 回到进程刚启动时的数值。稳定服务通常会经过预热并保留部分已提交页面,绝对值不一定回落。

验收时至少确认三件事:RSS 不再单调上涨;对应 VMA 的 Anonymous 或 Private_Dirty 进入平台期;应用层对象或分配器指标与 /proc 的趋势能够相互解释。这样才能把“看起来内存高”收敛成可复现、可定位、可验证的内存问题。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

进程 RSS 持续上涨怎么查

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通