Redis 与缓存 / 系统课时

设计扩容与分片触发条件

设计扩容与分片触发条件

扩容不应该发生在 Redis 已经逼近 OOM 的最后几分钟。本课把纵向扩容、横向分片和暂缓扩容三种决策放进同一套门禁,结合持续增长速度、热点分布、内存余量和迁移成本,在容量真正吃紧之前完成动作。

学习目标

  • 能根据容量趋势判断何时应纵向扩容,何时需要横向分片
  • 能把热点分布、业务增长和迁移成本纳入扩容门禁
  • 能建立提前量充足、可验证、可回滚的容量触发条件

先定义触发信号

容量决策至少要同时看四类信号:内存压力、增长速度、热点分布和迁移成本。单一指标超过阈值并不自动等于必须分片,例如总内存接近上限但增长已经停止,可能更适合先治理 TTL 或大 Key。

建议把 used_memory 与 maxmemory 的比例作为即时压力信号,把过去一段时间的内存增长作为趋势信号,再结合 evicted_keys、热 Key 分布和单节点容量上限判断结构性风险。

Redis 纵向扩容与横向分片决策流程

建立容量压力基线

一个可执行的基线可以先计算内存使用率,再估算达到预设安全线还剩多少余量。安全线不是 Redis 的固定配置项,而是平台根据业务峰值、碎片和运维窗口定义的治理门槛。

bash
used=$(redis-cli INFO memory | awk -F: '/^used_memory:/{print $2}' | tr -d '\r')
max=$(redis-cli CONFIG GET maxmemory | awk 'NR==2')
awk -v used="$used" -v max="$max" 'BEGIN { printf "memory_used_ratio=%.2f%%\n", used/max*100 }'

预期结果

text
memory_used_ratio=57.06%

实际结果会随实例状态变化。这里的计算只用于形成容量趋势,不意味着 57% 就应扩容。真正的触发条件还要结合增长斜率、峰值余量和业务风险。

什么时候优先纵向扩容

纵向扩容适合“模型仍然适合单节点,但容量和峰值余量已经不足”的场景。例如 Key 分布均匀,没有明显热点,增长趋势可预测,业务也能接受一次受控的实例切换,那么扩大单节点内存通常比立即引入分片更简单。

一个实用门禁可以包含三个条件:当前容量进入预警区、增长趋势在未来运维窗口内会继续逼近上限、目标实例仍能覆盖峰值需求。扩容前必须确认实例规格、网络、持久化与故障切换能力不会成为新的瓶颈。

什么时候必须考虑横向分片

横向分片不是简单地把总内存除以节点数。它更适合三类情况:单节点容量已经接近可用规格上限;业务数据增长长期超过单节点扩容能力;或者热点、吞吐、连接等压力已经集中到单节点。

分片前先回答三个问题。第一,Key 是否能接受稳定的路由规则;第二,多 Key 操作是否依赖跨分片原子性;第三,迁移期间是否存在明显业务窗口约束。若业务强依赖跨 Key 事务或复杂聚合,分片带来的应用改造成本可能高于短期扩容收益。

此外,还要单独关注热点。总内存只有 50% 并不代表一定安全:如果 10% 的 Key 承担绝大部分请求,它们可能集中压垮单个分片。此时决定分片数量的并不只是容量,还有热点是否能够均衡分布。

用提前量而不是 OOM 门槛决策

扩容条件最好设计成“预警线”和“执行线”两级,而不是等 used_memory 接近 maxmemory 才处理。例如先在容量进入预警区时冻结新增大对象、检查增长来源并准备迁移;达到执行线后直接启动已经验证过的扩容或分片方案。

可以把决策逻辑简化为:容量高但增长稳定且单节点仍有规格空间,优先纵向扩容;容量高且单节点已接近规格上限,进入分片评估;容量尚可但热点高度集中,则先治理热点或重新设计路由;容量上涨主要来自 TTL 异常或无界 Key,则先修复生命周期问题。

在变更前验证迁移成本

容量决策最终不是一个数字问题,而是风险问题。执行前应验证数据量、峰值 QPS、热点 Key 分布、客户端路由能力、故障切换方式和迁移窗口,并明确回退条件。

一个简单的容量决策记录可以先由脚本输出当前压力、淘汰计数和 Key 数,作为变更前基线。

bash
redis-cli INFO memory | grep -E 'used_memory:|used_memory_peak:|maxmemory:'
redis-cli INFO stats | grep -E 'evicted_keys:|expired_keys:'
redis-cli DBSIZE

预期结果

text
used_memory:612345678
used_memory_peak:698765432
maxmemory:1073741824
evicted_keys:318
expired_keys:45210
842315

变更后应在相同口径下再次采样,比较内存余量、增长速度、淘汰趋势和热点分布是否改善。这样才能确认“扩容成功”不仅意味着容量变大,也意味着风险曲线确实被推远。

最终的容量体系应把触发条件写成可执行门禁:先看增长是否真实且持续,再看单节点还有没有纵向空间,随后判断热点和业务操作是否适合分片,最后把迁移成本和回退能力纳入决策。提前数小时或数天行动,远比等到 OOM 前被迫迁移可靠。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

设计扩容与分片触发条件

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通