架构与系统设计 / 系统课时

选择分区键保持局部有序

选择分区键保持局部有序

异步下单并不要求所有消息全局有序,真正需要的是把同一业务实体的相关事件稳定送进同一分区。分区键选得好,既能保住必要顺序,又能让消费者并行扩展;选错则会制造热点,甚至在扩容时打破原有顺序边界。

学习目标

  • 判断订单、用户和商品三类分区键分别适合保护什么顺序。
  • 解释分区内有序、分区间无序与消费者并发之间的关系。
  • 识别热点分区和扩容重映射带来的迁移风险。

先确定谁必须有序

消息系统通常只能廉价地保证单分区内的顺序。因此第一步不是寻找“最均匀”的键,而是确定最小有序范围:哪些事件一旦乱序,就会让业务状态机得到错误结果。

如果订单创建、支付确认、取消都围绕同一个订单推进,按 orderId 分区通常最自然;如果规则要求同一用户的资格扣减、限购判断严格串行,可以考虑 userId;如果库存扣减必须围绕同一商品串行,则可能使用 skuId,但热门商品会把全部流量压到少数分区。

分区键 能保护的局部顺序 主要风险
orderId 单订单生命周期事件 无法让同一商品的不同订单串行
userId 单用户资格、限购、账户类事件 大客户或机器人账号可能形成热点
skuId 单商品库存、配额相关事件 秒杀爆款天然形成极热分区

分区键、分区和消费者之间的局部顺序关系

用稳定键换取局部顺序

只要生产端对同一个键使用稳定的路由规则,同一键的事件就会落到同一分区,消费者便可以按分区串行处理。下面用一个最小 Java 程序演示 hash(key) % partitionCount 的基本效果;真实消息中间件可能使用不同哈希算法,但判断原则相同。

java
import java.util.List;

public class PartitionKeyDemo {
    static int partitionOf(String key, int partitionCount) {
        // floorMod 避免负 hashCode 产生负分区号。
        return Math.floorMod(key.hashCode(), partitionCount);
    }

    public static void main(String[] args) {
        int partitionCount = 4;
        List<String> keys = List.of(
                "order-1", "order-2", "order-1", "sku-hot", "sku-hot");

        for (String key : keys) {
            // 相同 key 在分区数不变时会得到相同分区。
            System.out.printf("%s -> p%d%n",
                    key, partitionOf(key, partitionCount));
        }
    }
}

预期输出

text
order-1 -> p2
order-2 -> p3
order-1 -> p2
sku-hot -> p1
sku-hot -> p1

这里的关键不是分区号本身,而是同一键稳定落到同一分区。不同分区可由不同消费者并行处理,所以吞吐量来自“多分区并行”,顺序性来自“单分区串行”,两者的边界必须在设计时明确。

评估热点与消费者并发

分区键越集中,局部顺序越强,但越容易牺牲并发。以 skuId 为键时,秒杀爆款的所有消息可能集中到一个分区;即使消费者组再增加实例,也无法让同一分区同时被多个实例安全并行消费,瓶颈仍然存在。

可以先观察键分布而不是只看总 QPS:计算最热键占比、各分区消息速率与消费延迟。如果某个商品需要严格串行,又远高于单分区处理能力,应重新审视业务约束,例如把“资格校验”和“最终库存确认”拆成不同阶段,而不是简单增加消费者数量。

把扩容当成顺序迁移

如果路由规则是 hash(key) % N,增加分区数会改变部分键的计算结果。历史消息仍留在旧分区,而扩容后的新消息可能进入新分区;此时同一键跨两个分区并行消费,就可能在迁移边界出现乱序。

需要长期严格有序时,应把分区数视为协议的一部分。扩容可以采用停写后排空旧分区、显式维护“键到分区”映射,或让路由表带版本并控制切换时点。选择分区键时最终要同时回答三个问题:最小有序范围是什么、最热键能否被单分区承载、分区扩容后如何迁移而不破坏这个范围。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

选择分区键保持局部有序

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通