Redis 与缓存 / 系统课时

关联 Redis 与系统内存视角

关联 Redis 与系统内存视角

Redis 自己报告的内存正常,并不代表进程、容器和宿主机一定安全。本课建立从 INFO memory 到进程 RSS、容器限制和宿主机可用内存的四层检查路径,让你能判断压力究竟发生在 Redis 内部还是运行环境外层。

学习目标

  • 把 Redis 的 used_memory、used_memory_rss 与操作系统进程 RSS 对齐
  • 判断容器内存上限是否比 Redis maxmemory 更早成为硬边界
  • 结合宿主机可用内存识别 Redis 正常但系统仍可能 OOM 的场景

从四个层次看同一份内存

Redis 内部最重要的两个口径是 used_memory 和 used_memory_rss。前者反映 Redis 经分配器申请的内存,后者反映 Redis 观察到的进程驻留集。进入操作系统后,还要用进程工具验证实际 RSS;如果运行在容器中,还必须增加容器当前用量和内存上限;最外层则是宿主机的可用内存与整体内存压力。

Redis 到宿主机的四层内存视角

这几个数字不要求完全相等。Redis 的统计时点、分配器行为、操作系统页面记账方式以及命令采样时刻都可能造成差异。真正需要关注的是数量级是否一致、差值是否持续扩大,以及哪一层最先接近资源上限。

对齐 Redis 与进程 RSS

先采集 Redis 内部统计,再读取 Redis 进程的 RSS。下面示例假设能够在 Redis 所在主机或容器命名空间中执行系统命令。

bash
redis-cli -h <IP> -p <PORT> INFO memory | grep -E '^(used_memory:|used_memory_rss:|maxmemory:)'
pid=$(redis-cli -h <IP> -p <PORT> INFO server | awk -F: '/^process_id:/ {gsub("\\r", "", $2); print $2}')
ps -o pid=,rss=,comm= -p "$pid"

预期输出中,ps 的 RSS 单位通常为 KiB;实际 PID 和数值会不同:

text
used_memory:<VALUE>
used_memory_rss:<VALUE>
maxmemory:<VALUE>
<PID> <VALUE> redis-server

INFO memory 的 used_memory_rss 与系统工具看到的 RSS 应处于相近数量级,但短时间内不必逐字节一致。如果 Redis 报告的 RSS 与系统 RSS 长期差异巨大,应先确认是否采到了同一个进程、是否跨越了容器命名空间,以及监控工具是否使用了不同的内存口径。

检查容器是否才是真正的硬上限

容器化部署中,Redis 的 maxmemory 只控制 Redis 的淘汰或写入拒绝逻辑,并不能限制整个进程的全部 RSS。复制缓冲区、客户端缓冲区、分配器保留页以及其他进程开销都会消耗容器额度,因此容器限制通常应高于 Redis 可用于数据治理的目标值。

在使用 cgroup v2 的 Linux 环境中,可以直接查看当前用量和限制:

bash
cat /sys/fs/cgroup/memory.current
cat /sys/fs/cgroup/memory.max

预期输出:

text
<VALUE>
<VALUE>

如果第二行是 max,表示该 cgroup 在这一层没有设置有限的 memory.max;如果是整数,则单位为字节。实际部署还可能存在上级 cgroup 的更严格约束,因此这两个文件应在 Redis 实际所属的 cgroup 中读取。

当 memory.current 已逼近 memory.max,即使 used_memory 尚未达到 maxmemory,容器也可能先出现强烈内存回收甚至被 OOM 机制终止。此时继续调大 Redis maxmemory 会进一步缩小安全余量,而不是解决问题。

再看宿主机有没有余量

最后检查宿主机的整体内存。相比单独看 MemFree,Linux 上更适合使用 MemAvailable 评估还能给应用使用多少内存,因为一部分缓存页可以在压力下回收。

bash
grep -E '^(MemTotal|MemAvailable|SwapTotal|SwapFree):' /proc/meminfo

预期输出:

text
MemTotal:       <VALUE> kB
MemAvailable:   <VALUE> kB
SwapTotal:      <VALUE> kB
SwapFree:       <VALUE> kB

如果 Redis 自身内存稳定、容器也未触顶,但宿主机 MemAvailable 持续接近低位,就要检查同机其他容器、其他进程以及内核内存。宿主机的 OOM 决策面对的是整台机器,而不是只看 Redis 的 maxmemory。

用固定顺序定位哪一层先失控

发生内存告警时,可以固定按“Redis 逻辑内存 → Redis RSS → 容器额度 → 宿主机可用内存”的顺序检查。这样能够快速区分四类典型情况:Redis 数据本身增长、Redis RSS 与逻辑内存脱节、容器额度过紧,以及宿主机整体资源争抢。

如果 used_memory 接近 maxmemory,优先进入 Redis 数据规模与淘汰策略分析;如果 used_memory 不高但 RSS 明显偏高,应检查分配器和碎片;如果 RSS 尚有余量但容器已逼近限制,应重新计算容器安全空间;如果容器正常而宿主机 MemAvailable 告急,则需要处理节点级资源竞争。

真正可靠的 Redis 内存基线不是某一个仪表盘数字,而是这四层指标在同一时间窗口内能够相互解释。只有先找到最先接近边界的那一层,后续的限额调整、数据治理或 OOM 排障才不会治错方向。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

关联 Redis 与系统内存视角

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通