Redis 与缓存 / 系统课时

识别大键

识别大键

本课解决“哪些键占用过多内存或包含过多元素”的定位问题。完成后,你能用渐进扫描、--bigkeys、--memkeys 和 MEMORY USAGE 找出候选大键,并进一步确认类型与规模。

学习目标

  • 区分内存大键与元素数量大键
  • 使用低风险扫描工具定位候选键
  • 结合类型、基数和内存占用完成确认

什么是大键

大键没有统一字节阈值。一个 String 可能因值很大而成为大键;Hash、List、Set、Sorted Set 或 Stream 可能单个元素不大,但元素数量过多,导致命令执行、网络传输、持久化和删除耗时增加。

因此应同时关注两个维度:键占用的内存字节数,以及聚合类型的元素数量。只看 DBSIZE 无法判断单个键是否异常。

用 redis-cli 渐进扫描

redis-cli --bigkeys 使用 SCAN 遍历键空间,按类型报告元素数量较大的键;--memkeys 更关注内存占用。它们比 KEYS * 更适合生产排查,但仍会消耗 CPU 和网络,应在低峰期限速执行。

bash
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" --bigkeys -i 0.1

预期输出示例:

text
-------- summary -------
Sampled <KEY_COUNT> keys in the keyspace!
Biggest string found "cache:article:<ID>" has <BYTES> bytes
Biggest hash found "user:profile:all" has <FIELD_COUNT> fields

键名、数量和字节数会随数据变化。-i 0.1 表示每执行一批扫描后暂停一段时间,用于降低持续压力。继续按估算内存占用扫描:

bash
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" --memkeys -i 0.1

预期输出示例:

text
-------- summary -------
Sampled <KEY_COUNT> keys in the keyspace!
Biggest key "cache:article:<ID>" found so far with <BYTES> bytes

若当前 redis-cli 不支持 --memkeys,可先用 --bigkeys 找候选,再逐个执行 MEMORY USAGE。

精确确认候选键

对候选键依次检查类型、内存和元素数量。下面以 Hash 为例。

bash
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
KEY_NAME="user:profile:all"
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" TYPE "$KEY_NAME"
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" MEMORY USAGE "$KEY_NAME" SAMPLES 5
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" HLEN "$KEY_NAME"

预期输出:

text
hash
(integer) <BYTES>
(integer) <FIELD_COUNT>

MEMORY USAGE 返回键及其值结构的估算字节数。对 List 使用 LLEN,Set 使用 SCARD,Sorted Set 使用 ZCARD,Stream 使用 XLEN。

使用 SCAN 定向排查

已知业务前缀时,可以只扫描相关键。COUNT 是每次迭代的工作量提示,不保证严格返回相同数量;完整遍历必须持续到游标回到 0。redis-cli --scan 会替你处理游标循环。

bash
REDIS_HOST=127.0.0.1
REDIS_PORT=6379
redis-cli -h "$REDIS_HOST" -p "$REDIS_PORT" \
  --scan --pattern "cache:article:*" --count 1000 | head

预期输出示例:

text
cache:article:<ID1>
cache:article:<ID2>
cache:article:<ID3>

不要用 KEYS cache:article:* 替代生产扫描,因为它会一次性遍历并返回全部匹配键。

建立大键基线

识别大键后,应记录键模式、数据类型、字节数、元素数量、增长速度和业务负责人。阈值应按命令复杂度和实例容量制定,例如分别限制单个 String 大小、单个集合元素数和单键内存占比,而不是全实例只设一个固定值。

同一个键是否危险还取决于访问命令。一个很大的 Hash 若只执行单字段读写,风险与频繁执行 HGETALL 完全不同,因此阈值必须结合访问路径评估。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

识别大键

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通