架构与系统设计 / 系统课时

识别 Redis 热点键与大键

识别 Redis 热点键与大键

Redis 出现延迟抖动时,不能只凭“CPU 高”就判定热 Key,也不能把内存大都归因于大 Key。本篇用命令统计、延迟、Key 访问频度、对象大小和网络吞吐建立证据链,区分 CPU、网络、内存与主线程命令执行争用。

学习目标

  • 区分热 Key 与大 Key,并识别两者叠加时的风险
  • 用低风险诊断命令收集命令、延迟、内存和网络证据
  • 根据指标组合判断 CPU、网络、内存或主线程争用

先分清热 Key 与大 Key

热 Key 的核心是访问集中:某个很小的 Key 也可能因为每秒被读取大量次数而压住单个实例。大 Key 的核心是对象体量大:一个集合包含大量成员,或一个字符串值很大,即使 QPS 不高,也可能拖慢序列化、网络传输、删除和全量读取。

两类问题可以叠加。例如一个体积很大的热门商品详情既是大 Key 又是热 Key,此时 CPU、网络和延迟可能一起恶化。诊断时必须同时看访问频度和对象大小,而不是二选一。

用低风险命令建立证据链

下面的命令先看实例级指标,再定位命令与 Key。<HOST>、<PORT> 和 <KEY> 替换为实际值;--bigkeys 会遍历键空间,生产环境应优先在副本或低峰期执行,并通过 -i 降低扫描节奏。

bash
HOST='<HOST>'
PORT='<PORT>'
KEY='<KEY>'

redis-cli -h $HOST -p $PORT INFO stats
redis-cli -h $HOST -p $PORT INFO memory
redis-cli -h $HOST -p $PORT INFO commandstats
redis-cli -h $HOST -p $PORT LATENCY LATEST
redis-cli -h $HOST -p $PORT SLOWLOG GET 10
redis-cli -h $HOST -p $PORT --bigkeys -i 0.1
redis-cli -h $HOST -p $PORT MEMORY USAGE $KEY SAMPLES 5

POLICY=$(redis-cli -h $HOST -p $PORT --raw CONFIG GET maxmemory-policy | tail -n 1)
if [[ $POLICY == *lfu ]]; then
    redis-cli -h $HOST -p $PORT --hotkeys -i 0.1
else
    echo 'SKIP --hotkeys: LFU policy is not enabled'
fi

预期结果

text
INFO stats:出现 instantaneous_ops_per_sec、instantaneous_input_kbps、instantaneous_output_kbps 等字段。
INFO memory:出现 used_memory、used_memory_rss、mem_fragmentation_ratio 等字段。
INFO commandstats:按命令给出 calls、usec、usec_per_call。
LATENCY LATEST:启用延迟监控且存在事件时返回事件记录,否则结果可能为空。
SLOWLOG GET 10:存在慢命令时返回最近记录,否则结果可能为空。
--bigkeys:扫描完成后报告各数据类型中较大的 Key。
MEMORY USAGE:返回 <KEY> 估算占用的字节数。
--hotkeys:启用 LFU 淘汰策略时返回高频 Key 排名,否则脚本输出 SKIP。

--hotkeys 给的是 LFU 频度排名,不等于精确的“每秒请求数”。如果业务必须拿到单 Key QPS,应在客户端、代理层或网关做时间窗口计数与 Top-K 聚合,避免把所有原始 Key 直接作为监控标签造成高基数问题。

Redis 热 Key 与大 Key 诊断流程

从指标组合判断瓶颈

如果某个 Key 的访问频度远高于其他 Key,而 MEMORY USAGE 很小、网络吞吐也不高,却看到 GET、SET 等短命令调用量极大并伴随 CPU 上升,更像是热 Key 导致的主线程执行争用。此时仅扩容内存不会解决问题。

如果 Key 很大,同时 instantaneous_output_kbps 上升,而 SLOWLOG 中命令执行时间并不突出,客户端仍感觉响应慢,应优先检查响应体大小和网络传输。慢日志主要用于观察服务器执行命令的耗时,不能替代客户端和网络延迟指标。

如果 used_memory 持续逼近上限,并伴随淘汰增加、碎片率恶化或后台内存压力,大 Key 更可能首先表现为内存问题。若 SMEMBERS、大范围 LRANGE 或大 Hash 全量读取等操作同时进入慢日志,则还叠加了命令复杂度和主线程阻塞。

现象组合 更可能的根因 继续确认
小 Key、高频、CPU 高、网络平稳 热 Key / 主线程争用 单 Key Top-K、命令调用量
大 Key、输出带宽高、客户端慢 大响应 / 网络瓶颈 对象大小、响应字节数
大 Key、慢日志明显 大对象命令成本 命令类型、元素数量
内存逼近上限、淘汰增加 内存压力 大 Key 分布、碎片率

避免诊断造成二次压力

不要在高峰期直接运行 KEYS *,也不要把 MONITOR 当成常驻的热 Key 统计器;它们可能放大已经存在的压力。--bigkeys 和 --hotkeys 虽然使用渐进式扫描思路,也应限速、错峰,并优先在可承受扫描压力的副本上执行。

最终判断要形成闭环:先用实例指标确认“资源在哪一层变坏”,再用命令统计缩小范围,最后用 Key 频度和对象大小落到具体对象。只有访问频度、对象体量、命令成本、网络与内存几组证据互相印证,才能把热 Key、大 Key 和普通容量不足区分开。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

识别 Redis 热点键与大键

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通