Redis 与缓存 / 系统课时

执行缓存异常演练

执行缓存异常演练

本课在独立 Redis 实例中模拟热点键失效、请求超时和内存不足,分别验证互斥重建、超时降级与容量保护是否生效。演练完成后,应能从 Redis、应用和后端数据库三侧确认保护链路,而不是只看到一条报错。

学习目标

  • 构造热点键失效、Redis 超时和内存不足三类异常
  • 识别每类异常的关键观测信号
  • 验证重建、降级和容量保护措施

建立隔离演练实例

不要在生产实例直接制造 OOM 或执行全局暂停。下面配置在本机 6380 端口启动一个小内存实例,关闭持久化并使用 noeviction,专门用于故障注入。

conf
port 6380
bind 127.0.0.1
protected-mode yes
save ""
appendonly no
maxmemory 16mb
maxmemory-policy noeviction

启动实例并确认端口可用。

bash
redis-server ./redis-cache-drill.conf --daemonize yes
redis-cli -p 6380 PING

预期输出如下;若端口被占用,应更换端口并同步修改后续命令。

text
PONG

三类异常的触发条件、影响对象和保护措施不同,下面的流程图用于区分故障注入、观测信号与验收重点。

缓存异常演练与保护流程

演练热点键失效

先创建一个即将过期的热点键,再在过期后并发读取。Redis 只会返回空值,真正的验收重点是应用是否抑制并发回源,避免数据库 QPS 与请求数同步放大。

bash
redis-cli -p 6380 SET hot:product:1001 '{"stock":100}' EX 2
sleep 3
seq 1 20 | xargs -I{} -P20 redis-cli -p 6380 --no-raw GET hot:product:1001

预期输出为 20 次空结果,输出顺序可能因并发执行而变化。

text
(nil)
... 共 20 次空结果

应用侧应确认只有一个请求执行缓存重建,其余请求等待、快速失败或读取可接受的旧值。保护措施通常包括互斥重建或单飞、过期时间随机抖动、空值缓存和热点数据预热。锁必须设置过期时间,写回缓存前还要再次检查数据是否已被其他请求重建。

演练 Redis 超时

使用 CLIENT PAUSE 暂停独立实例,并让本地命令在 1 秒后主动终止。该命令会影响实例上的所有连接,只能用于隔离环境。

bash
redis-cli -p 6380 SET drill:key value
redis-cli -p 6380 CLIENT PAUSE 3000 ALL >/dev/null &
sleep 0.1
timeout 1 redis-cli -p 6380 GET drill:key
echo "exit=$?"

预期输出中的退出码为 124,表示命令被 GNU timeout 终止;不同系统若没有该命令,应使用等价的客户端超时设置。

text
exit=124

应用应配置短连接超时、有限重试、熔断和可接受的降级数据,避免请求线程持续堆积。重试必须设置次数上限并加入随机抖动,防止 Redis 恢复时出现集中重试。

演练内存不足

向 noeviction 实例持续写入较大值,直到 Redis 拒绝写入。该演练用于验证应用是否识别 OOM 错误,并触发容量告警,而不是继续把写入失败当作成功。

bash
value=$(head -c 65536 /dev/zero | tr '\0' 'x')
for i in $(seq 1 1000); do
  result=$(redis-cli -p 6380 SET "fill:$i" "$value" 2>&1)
  if [[ "$result" == *OOM* ]]; then
    echo "$result"
    break
  fi
done
redis-cli -p 6380 INFO memory | grep -E '^(used_memory_human|maxmemory_human):'

预期输出会出现 OOM 错误,并显示当前内存与上限。<USED_MEMORY> 是动态值,实际成功写入的键数量也会因 Redis 版本和对象开销而不同。

text
OOM command not allowed when used memory > 'maxmemory'.
used_memory_human:<USED_MEMORY>
maxmemory_human:16.00M

容量策略应根据业务选择淘汰、扩容或拒绝写入,并持续监控 used_memory、evicted_keys、内存使用率和写入错误。演练结束后执行 redis-cli -p 6380 SHUTDOWN NOSAVE 停止实例,并删除演练配置与测试数据。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

执行缓存异常演练

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通