P2P 与分布式存储 / 系统课时

三副本在节点故障时还能保住什么

三副本在节点故障时还能保住什么

三副本不是“坏两个节点也一定能继续服务”的同义词。它首先提高的是数据仍有副本存活的概率,而读写是否还能继续,还取决于副本是否分散到独立故障域,以及系统采用怎样的读写确认规则。下面用三个节点和具体故障组合把这几个概念拆开。

学习目标

  • 区分副本数量、可丢失副本数和读写可用条件。
  • 判断单节点、双节点故障后数据是否仍然存在以及服务是否可用。
  • 识别三个副本落入同一机架等共同故障域时的失效风险。

三副本先保证三份独立数据副本

设对象 obj-A 被完整复制到 storage-1、storage-2、storage-3。副本因子为 3,表示正常状态下希望保留 3 份完整副本,而不是把一个对象切成三份。

三副本对象在三个节点上的放置与故障结果

如果三个副本状态一致,那么故障后的数据生存情况可以直接按存活副本数判断:

故障情况 存活副本 数据是否仍存在
无节点故障 3 是
1 个节点故障 2 是
2 个节点故障 1 是
3 个节点全部故障 0 否

因此,单从“还有没有完整数据”看,三副本最多允许同时丢失 2 份副本;只要剩下 1 份完整副本,对象内容就还没有丢失。但这并不自动意味着系统仍接受新的写请求。

存活一份不等于还能继续写

读写可用性由确认规则决定。假设一个简化系统规定:读操作只需任意 1 个副本响应,写操作必须至少得到 2 个副本确认。可以把条件记成读确认数 R=1R=1、写确认数 W=2W=2、副本数 N=3N=3。

此时故障结果如下:

存活节点数 读取 新写入 原因
3 可用 可用 满足 R=1R=1 和 W=2W=2
2 可用 可用 仍有两个节点可确认写入
1 可用 不可用 满足读取,但无法获得两个写确认
0 不可用 不可用 没有副本可访问

例如 storage-1 和 storage-2 同时离线,只剩 storage-3。旧数据仍然存在,并且在允许单副本读取的前提下可以读出;但继续写入会让唯一副本承担全部风险,因此采用 W=2 的系统应拒绝写入,而不是把“还有一份数据”误判成“系统完全正常”。

副本必须跨故障域放置

三个节点并不一定代表三个独立故障点。假设 storage-1、storage-2、storage-3 都位于 Rack-A,同一机架交换机或供电故障就可能一次带走全部三个副本。此时副本数虽然仍是 3,但能抵抗的机架级故障数其实是 0。

更合理的放置方式是让三个副本分别位于 Rack-A、Rack-B、Rack-C。如果 Rack-A 整体失效,只损失其中一份;剩余两个副本仍能满足前面示例中的 W=2 写入条件。

判断副本布局时,应逐层检查故障域,而不是只数服务器数量:节点、磁盘、机架、可用区都可能形成共同失效边界。若三个副本使用同一电源、同一机架交换机或同一可用区,就没有真正获得对应层级的三份独立容错能力。

用故障场景验收副本策略

一个可操作的验收方法是先写入对象,再按故障等级逐步下线副本,并分别检查数据存在性、读取能力和写入能力。以 N=3、R=1、W=2 为例,至少应验证三种场景:只停 1 个副本时读写均成功;同时停 2 个副本时旧数据仍可读但新写入被拒绝;恢复其中一个副本后,写能力重新满足两个副本确认条件。

如果测试中“两个节点故障后仍能写入”,要继续确认系统是否主动降低了写确认数;如果“一个节点故障就无法写入”,则应检查副本健康状态、领导者选举或放置策略,而不能直接得出三副本只能容忍零次故障的结论。

三副本真正提供的是三份完整数据副本带来的故障余量。判断它还能保住什么时,应分别回答三个问题:还剩几份完整数据、当前确认规则允许哪些读写、这些副本是否真的位于独立故障域。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

三副本在节点故障时还能保住什么

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通