消息队列 / 系统课时

Leader、Follower 与 ISR

Leader、Follower 与 ISR

Kafka 的一个分区可以有多个副本,但同一时刻只有一个 Leader 对外处理该分区的正常读写,其余副本作为 Follower 持续追赶。理解 ISR 的动态变化,才能判断副本什么时候仍可参与选举,以及故障时为什么有的副本能接管、有的不能。

学习目标

  • 区分 Leader、Follower 与 ISR 的职责和关系
  • 说明 Follower 追赶 Leader、进入或退出 ISR 的条件
  • 根据副本状态判断 Leader 故障后的选举结果与风险

副本角色不是静态主从

一个分区的所有副本保存的是同一条有序日志。Leader 接收生产者写入,并作为正常消费者读取该分区数据的主要副本;Follower 不独立接受这类写入,而是主动向 Leader 拉取新记录,按相同顺序追加到自己的日志。

ISR 是 In-Sync Replicas,表示当前被认为与 Leader 保持足够同步的一组副本。Leader 自己通常也在 ISR 中,因此“ISR 有 2 个副本”通常意味着 Leader 加至少 1 个同步 Follower,而不是 2 个 Follower。

ISR 如何随同步状态变化

Follower 会持续发送 fetch 请求获取 Leader 后续日志。只要它能在允许的滞后时间内持续追上 Leader,就保留在 ISR;如果网络中断、Broker 卡顿或复制长期落后,它会被移出 ISR。恢复后,只有重新追到可接受的同步位置,才会重新加入。

单分区副本同步、ISR 变化与 Leader 选举关系

这个机制的关键是:Follower 身份与 ISR 成员资格不是一回事。某副本仍然是该分区的 Follower,却可能因为落后而暂时不在 ISR 中。

Leader 故障时如何选举

当 Leader 所在 Broker 不可用时,Kafka 的控制器会为该分区选择新的 Leader。正常的“干净选举”只从合格的同步副本中选取,因此能够避免让明显落后的副本直接接管。

如果启用了非同步副本参与的非干净选举,在没有 ISR 副本可用时,系统可能选择落后副本恢复可用性,但代价是已经写入旧 Leader、却尚未复制到该副本的数据可能丢失。生产系统通常把这种选择看成“可用性优先”与“数据完整性优先”的明确取舍。

用命令观察副本状态

在至少包含 3 个 Broker 的测试集群中,可以创建一个单分区、3 副本的主题,再查看 Leader、Replicas 与 ISR。<HOST>、<PORT>、<ID> 和 <VALUE> 的实际值会因环境而不同。

bash
kafka-topics.sh --bootstrap-server <HOST>:<PORT> --create --topic orders --partitions 1 --replication-factor 3
kafka-topics.sh --bootstrap-server <HOST>:<PORT> --describe --topic orders

预期输出

text
Created topic orders.
Topic: orders  TopicId: <ID>  PartitionCount: 1  ReplicationFactor: 3  Configs: <VALUE>
Topic: orders  Partition: 0  Leader: <ID>  Replicas: <ID>,<ID>,<ID>  Isr: <ID>,<ID>,<ID>

Leader 是当前主副本所在 Broker,Replicas 是该分区全部副本,Isr 则只列当前同步副本。故障实验时,最值得观察的不是副本总数,而是 ISR 是否缩小、Leader 是否切换,以及落后副本恢复后是否重新进入 ISR。

判断故障是否安全

分析一个分区时,可以按“Leader 是否可用 → ISR 还剩多少 → 是否存在可选同步副本”的顺序判断。只要仍有合格 ISR 能接管,Kafka 可以通过重新选举恢复服务;如果只剩落后副本,就必须在停写等待恢复和允许潜在数据丢失之间做取舍。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

Leader、Follower 与 ISR

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通