可观测性与稳定性 / 系统课时
绘制内存和 Swap 状态
绘制内存和 Swap 状态
Linux 内存监控最容易出现的误判,是看到 free 很低就认为服务器即将耗尽内存。本节使用 Node Exporter 的 total、available 和 Swap 指标搭建 Grafana 面板,让趋势更接近真实的内存压力。
学习目标
- 使用
MemAvailable计算更有意义的内存使用率 - 绘制可用内存趋势并识别持续下降现象
- 观察 Swap 使用变化,避免仅凭一个瞬时值判断内存不足
为什么重点看 available
Linux 会主动使用空闲内存做页缓存,因此 MemFree 很低并不等于应用已经没有可用内存。node_memory_MemAvailable_bytes 表示在不发生明显交换的情况下,系统估计仍可供新应用使用的内存,更适合作为主机内存压力的观察入口。
仪表盘可以保留三个核心视角:内存使用率用于快速判断整体变化,Available 用于观察剩余余量,Swap Used 用于发现内存压力是否已经开始把页面交换到磁盘。
绘制内存使用率
使用 Total 减去 Available,可以避免把大量可回收缓存简单算成不可用内存。Grafana 中建立 Time series 面板并输入:
100 * (1 - node_memory_MemAvailable_bytes / node_memory_MemTotal_bytes)预期结果
{instance="<HOST>:<PORT>"} <VALUE><VALUE> 是 0 到 100 附近的动态百分比。Grafana 中将单位设置为 Percent (0-100),即可直接观察内存使用率随时间的变化。
相比单独使用 MemFree,这条曲线更适合回答“系统还能否较轻松地满足新的内存需求”。不过它仍然只是主机级趋势,不能直接说明究竟是哪一个进程消耗了内存。
同时观察 Available
百分比适合快速扫描,但排查问题时还需要知道到底剩余多少字节。可以增加第二个 Time series 或 Stat 面板:
node_memory_MemAvailable_bytes预期结果
{instance="<HOST>:<PORT>"} <VALUE>将 Grafana 单位设置为 bytes (IEC),Grafana 会自动按 KiB、MiB、GiB 等量级显示。相比“当前只有 8% 可用”这样的百分比,绝对值更容易判断应用还能否承受一次较大的内存增长。
观察趋势时,比单个瞬时点更重要的是变化方向。Available 在业务高峰下降、随后恢复,往往属于正常波动;如果它在较长时间内持续下降并且没有恢复,则值得继续检查进程内存增长、缓存行为或泄漏问题。
绘制 Swap 使用量
Node Exporter 分别提供 Swap 总量和剩余量,两者相减即可得到已经使用的 Swap:
node_memory_SwapTotal_bytes - node_memory_SwapFree_bytes预期结果
{instance="<HOST>:<PORT>"} <VALUE>Grafana 中同样使用 bytes (IEC) 单位。如果主机没有配置 Swap,SwapTotal 通常为 0,此时 Swap Used 也应保持为 0。对于这种主机,不需要为了显示百分比而做除以 SwapTotal 的计算,否则零分母会产生无意义结果。
Swap 已经出现非零值也不代表当前一定发生严重故障。Linux 可能保留过去交换出去、当前暂时不活跃的页面,因此更有价值的是观察它是否持续增长,以及增长时 Available 是否同步下降。
用组合趋势识别内存压力
只看“内存使用率很高”通常不足以得出结论。Linux 充分利用内存做缓存是正常现象,真正值得关注的是多个信号同时恶化。
当内存使用率长期较高,但 Available 仍保持稳定、Swap Used 没有持续增长时,主机未必存在明显压力。相反,如果 Available 持续减少,同时 Swap Used 不断增加,就更应该继续排查应用工作集增长、异常进程以及系统换页活动。
实际仪表盘可以把内存使用率放在百分比趋势面板,把 Available 和 Swap Used 分别以字节趋势展示。这样既能快速看到总体变化,又保留足够的绝对容量信息用于故障判断。