Linux 与服务器运维 / 系统课时

内存持续上涨是不是泄漏

内存持续上涨是不是泄漏

看到内存曲线持续上升时,不能只凭“已用内存越来越大”就判定泄漏。排查重点是把主机内存趋势、进程 RSS/PSS 变化和文件缓存拆开观察,确认增长发生在哪一层,再结合业务负载判断它是否会持续失控。

学习目标

  • 区分业务缓存、Linux 文件缓存与进程真实占用的增长
  • 用时间趋势而不是单个瞬时值判断是否存在泄漏
  • 掌握从主机到进程的最短定位路径

先确认到底是谁在涨

先看系统层面的 MemAvailable、buff/cache 和交换区,再看大进程的 RSS。free 中的 used 不能直接等同于“应用占用”,因为 Linux 会主动利用空闲内存做页缓存;更值得关注的是 available 是否持续下降,以及进程 RSS 是否同步上涨。

bash
free -h
ps -eo pid,comm,rss,vsz,%mem --sort=-rss | head

预期输出

text
               total        used        free      shared  buff/cache   available
Mem:           <TOTAL>      <USED>      <FREE>      <SHARED> <CACHE>      <AVAILABLE>
Swap:          <SWAP>       <SWAP_USED> <SWAP_FREE>

    PID COMMAND           RSS      VSZ %MEM
   <ID> <PROCESS>       <RSS>    <VSZ> <PCT>

<TOTAL>、<RSS>、<ID> 等会随主机和进程变化。若 buff/cache 上升但 available 仍充足,且业务进程 RSS 基本稳定,通常更像文件缓存增长;若某个进程 RSS 随时间持续上升,就需要继续下钻。

内存上涨来源判断流程

用时间趋势排除瞬时波动

内存泄漏的关键不是“占用高”,而是在相近负载下,占用长期只升不降。可以每隔一分钟记录一次目标进程 RSS 和系统可用内存。下面是片段示例,运行前把 <ID> 替换为真实进程 PID。

bash
for i in 1 2 3 4 5; do
  date '+%F %T'
  awk '/^(MemAvailable|Cached|SReclaimable):/ {print}' /proc/meminfo
  ps -p <ID> -o pid=,rss=,vsz=,etime=,comm=
  sleep 60
done

预期输出

text
<TIME>
MemAvailable:    <KB> kB
Cached:          <KB> kB
SReclaimable:    <KB> kB
<ID> <RSS> <VSZ> <ELAPSED> <PROCESS>
...

实际时间和数值会不同。观察时尽量选择业务负载相近的窗口:如果请求量下降后 RSS 仍持续爬升,且空闲期或周期任务结束后也不回落,泄漏嫌疑才会明显增加。

区分业务缓存和真实泄漏

业务缓存与泄漏都可能表现为进程 RSS 增长,区别在于是否有上限、是否会回收,以及增长是否与业务对象数量一致。应用若有明确缓存容量、TTL 或 LRU 淘汰策略,RSS 往往会在达到稳定工作集后进入平台期;真正泄漏常见特征是对象生命周期失控,工作集不断扩大。

在支持 smaps_rollup 的系统上,可以进一步查看进程的汇总内存映射。下面是片段示例,需要对目标进程的 /proc 信息有读取权限,并把 <ID> 替换为实际 PID。

bash
cat /proc/<ID>/smaps_rollup

预期输出

text
Rss:                <KB> kB
Pss:                <KB> kB
Private_Clean:      <KB> kB
Private_Dirty:      <KB> kB
Shared_Clean:       <KB> kB
Shared_Dirty:       <KB> kB

如果私有内存随时间持续扩大,更像进程自身分配增长;如果主要表现为系统页缓存增加,而进程工作集稳定,则应把注意力转向文件访问模式。还要注意,运行时或内存分配器可能暂时保留已经不用的内存,因此 RSS 没立即下降本身也不能单独证明泄漏。

判断时不要只看一张曲线

一次内存告警只能说明“当前压力变大”,不能证明泄漏。更可靠的判断需要同时观察增长是否持续、是否与业务负载不成比例、进程私有内存是否同步扩大,以及在本应释放的时间点是否出现回落。

不要为了验证猜测直接在生产环境执行 drop_caches。它会扰动正常文件缓存并造成额外 I/O,最多只能作为受控实验的一部分,不能替代对 MemAvailable、RSS/PSS 和应用分配行为的时间趋势观察。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

内存持续上涨是不是泄漏

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通