Redis 与缓存 / 系统课时
识别大键
识别大键
本课解决“哪些键占用过多内存或包含过多元素”的定位问题。完成后,你能用渐进扫描、--bigkeys、--memkeys 和 MEMORY USAGE 找出候选大键,并进一步确认类型与规模。
学习目标
- 区分内存大键与元素数量大键
- 使用低风险扫描工具定位候选键
- 结合类型、基数和内存占用完成确认
什么是大键
大键没有统一字节阈值。一个 String 可能因值很大而成为大键;Hash、List、Set、Sorted Set 或 Stream 可能单个元素不大,但元素数量过多,导致命令执行、网络传输、持久化和删除耗时增加。
因此应同时关注两个维度:键占用的内存字节数,以及聚合类型的元素数量。只看 DBSIZE 无法判断单个键是否异常。
用 redis-cli 渐进扫描
redis-cli --bigkeys 使用 SCAN 遍历键空间,按类型报告元素数量较大的键;--memkeys 更关注内存占用。它们比 KEYS * 更适合生产排查,但仍会消耗 CPU 和网络,应在低峰期限速执行。
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" --bigkeys -i 0.1预期输出示例:
-------- summary -------
Sampled <KEY_COUNT> keys in the keyspace!
Biggest string found "cache:article:<ID>" has <BYTES> bytes
Biggest hash found "user:profile:all" has <FIELD_COUNT> fields键名、数量和字节数会随数据变化。-i 0.1 表示每执行一批扫描后暂停一段时间,用于降低持续压力。继续按估算内存占用扫描:
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" --memkeys -i 0.1预期输出示例:
-------- summary -------
Sampled <KEY_COUNT> keys in the keyspace!
Biggest key "cache:article:<ID>" found so far with <BYTES> bytes若当前 redis-cli 不支持 --memkeys,可先用 --bigkeys 找候选,再逐个执行 MEMORY USAGE。
精确确认候选键
对候选键依次检查类型、内存和元素数量。下面以 Hash 为例。
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
KEY_NAME="user:profile:all"
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" TYPE "$KEY_NAME"
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" MEMORY USAGE "$KEY_NAME" SAMPLES 5
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" HLEN "$KEY_NAME"预期输出:
hash
(integer) <BYTES>
(integer) <FIELD_COUNT>MEMORY USAGE 返回键及其值结构的估算字节数。对 List 使用 LLEN,Set 使用 SCARD,Sorted Set 使用 ZCARD,Stream 使用 XLEN。
使用 SCAN 定向排查
已知业务前缀时,可以只扫描相关键。COUNT 是每次迭代的工作量提示,不保证严格返回相同数量;完整遍历必须持续到游标回到 0。redis-cli --scan 会替你处理游标循环。
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" \
--scan --pattern "cache:article:*" --count 1000 | head预期输出示例:
cache:article:<ID1>
cache:article:<ID2>
cache:article:<ID3>不要用 KEYS cache:article:* 替代生产扫描,因为它会一次性遍历并返回全部匹配键。
建立大键基线
识别大键后,应记录键模式、数据类型、字节数、元素数量、增长速度和业务负责人。阈值应按命令复杂度和实例容量制定,例如分别限制单个 String 大小、单个集合元素数和单键内存占比,而不是全实例只设一个固定值。
同一个键是否危险还取决于访问命令。一个很大的 Hash 若只执行单字段读写,风险与频繁执行 HGETALL 完全不同,因此阈值必须结合访问路径评估。