服务注册与分布式协调 / 系统课时

用Observer隔离远端读流量

用Observer隔离远端读流量

当远端机房需要就近读取 ZooKeeper 数据时,直接把远端节点加入投票集合会把网络时延带进选举和仲裁路径。Observer 可以接收客户端连接并复制数据,却不参与投票,本节完成一套远端读流量隔离方案,并验证它不会改变多数派门槛。

学习目标

  • 理解 Observer 与 Leader、Follower 在仲裁职责上的区别
  • 配置远端 Observer 承担读取和客户端连接而不增加投票数
  • 验证 Observer 故障不会改变原有多数派门槛

为什么远端节点不宜直接变成投票成员

假设主集群有 3 个本地投票成员,多数派为 2。如果只是为了让远端业务就近读取数据而增加一个远端投票成员,总投票数就会变成 4,多数派随之提高到 3。

正常情况下三个本地成员仍能组成多数派,但只要其中一个本地成员故障,剩余两个本地成员就必须依赖远端投票成员才能凑够 3 票。此时跨地域网络时延和抖动会直接影响集群可用性,远端网络隔离也可能从“远端业务不可用”升级成“ZooKeeper 失去多数派”。

Observer 的作用正是把这两个目标拆开:它可以同步集群状态、接受客户端连接和提供读取服务,但不参与 Leader 选举,也不计入提交事务所需的多数票。

ZooKeeper投票成员与远端Observer的数据流和仲裁边界

配置远端 Observer

下面以三个投票成员加一个远端 Observer 为例。Observer 在动态成员配置中的服务器类型标记为 observer,本地 myid 必须与对应的 server.4 编号一致。

text
server.1=zk-a.example:2888:3888;2181
server.2=zk-b.example:2888:3888;2181
server.3=zk-c.example:2888:3888;2181
server.4=zk-remote.example:2888:3888:observer;2181

该配置生效后,server.1、server.2、server.3 仍是投票成员,总票数保持 3,多数派仍为 2;server.4 只作为 Observer。实际部署还需要保证各节点 dataDir 下的 myid 与服务器编号匹配,并按当前集群使用的静态配置或动态重配置方式落地成员信息。

验证节点角色和多数派

Observer 启动后,应先确认节点实际角色,而不是只检查配置文件。假设当前工作目录是 ZooKeeper 安装目录,可以在远端节点执行状态检查。

bash
bin/zkServer.sh status conf/zoo.cfg

预期输出中应出现 Observer 角色;安装路径、端口等动态内容可能不同:

text
ZooKeeper JMX enabled by default
Using config: <PATH>/conf/zoo.cfg
Client port found: 2181
Mode: observer

如果状态仍显示 follower,说明该节点实际上进入了投票集合,需要检查成员配置中的 observer 标记、节点使用的配置文件以及 myid 是否一致。

多数派的验证则更简单:三个投票成员时门槛始终是 2。Observer 在线、离线或重启都不会把门槛改成 3,因为它从未拥有投票权。真正影响多数派的是三个投票成员自身的存活状态。

把远端读取与写入路径分开理解

客户端连接 Observer 后,普通读取可以由 Observer 根据其本地已同步状态处理,因此适合把大量远端查询和会话连接从核心投票节点上分流出去。对于写请求,Observer 不会自行完成仲裁,而是把请求交给投票集群处理,最终仍由 Leader 和多数派完成事务提交。

这意味着 Observer 主要优化的是连接承载和读取路径,而不是消除远端写入的网络时延。如果远端客户端频繁写入,写请求仍要跨地域到达核心集群,再等待事务提交结果返回。

另外,ZooKeeper 的普通读取并不天然等价于“每次都读取全局最新值”。如果业务流程明确要求在某个时点先追上最新事务再读取,应使用客户端提供的同步语义,而不是因为连接了 Observer 就假定所有读取都具有线性一致性。

验证 Observer 故障不会扩大故障面

最后应主动停止远端 Observer 做一次故障演练。预期现象是连接到该节点的客户端会断开并根据连接串重新选择可用服务器,但核心三个投票成员仍保有 3 票中的至少 2 票,Leader 不应因为 Observer 下线而失去多数派。

如果 Observer 故障导致整个 ZooKeeper 集群无法完成选举或事务提交,就说明实际成员配置与设计不一致,常见情况是远端节点被误配成 Follower,或者原本的本地投票成员数量已经减少。

远端扩展的核心原则因此很明确:需要增加仲裁能力时才增加投票成员;只需要增加读容量、连接承载或远端接入点时优先使用 Observer。这样可以让远端链路故障停留在远端访问层,而不是进入 ZooKeeper 的多数派故障路径。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

用Observer隔离远端读流量

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通