P2P 与分布式存储 / 系统课时

为持久化故障准备回滚方案

为持久化故障准备回滚方案

故障时立即切回旧节点,可能丢掉切换后的新数据,甚至让同一身份在两处同时运行。本节为副本接管、整仓回退与业务版本回滚分别制定条件,确保恢复动作保留数据和证据。

学习目标

  • 区分独立副本切换与同身份仓库回退。
  • 在回滚前盘点增量并检查候选完整性。

先冻结不确定写入

出现故障后限制新增导入与保留变更,记录当前业务映射、根清单和错误。保存故障仓库,禁止先 GC 或删除坏块。选恢复来源时要核对最近完整恢复证据与业务版本,不应根据节点在线绿灯直接接管。

独立副本可以使用自己的身份接管服务;整仓复制的回退源与目标则共享身份,必须先停止目标再启动旧源。两种动作不可共用一个“启动备用”按钮,否则会产生重复身份或不一致业务映射。

副本切换与仓库回退的决策门

先计算是否具备回退条件

下面 Node.js 程序审核输入条件,仅作策略教学,不控制进程。保存为 rollback.cjs 后执行 node rollback.cjs。增量未盘点时,即使旧源健康也不能直接切回。

js
function decision(state) {
  // 同身份回退必须先防止两处同时运行。
  if (state.sameIdentity && !state.targetStopped) return 'stop target first';
  if (!state.candidateVerified) return 'verify candidate before cutover';
  if (!state.incrementalAccounted) return 'reconcile new roots before rollback';
  return 'ready for controlled cutover';
}
const cases = [
  {sameIdentity: true, targetStopped: false, candidateVerified: true, incrementalAccounted: true},
  {sameIdentity: true, targetStopped: true, candidateVerified: true, incrementalAccounted: false},
  {sameIdentity: false, targetStopped: false, candidateVerified: true, incrementalAccounted: true}
];
for (const item of cases) console.log(decision(item));

预期输出:

text
stop target first
reconcile new roots before rollback
ready for controlled cutover

输入为 true 必须有近期证据,不能凭旧记录或程序默认值填写。第三个候选是独立身份,因此不需要同身份停机条件,但仍需要明确路由或业务入口切换,以及旧故障节点的隔离策略。

业务版本回滚要保留旧内容

应用回到旧版本时,旧根必须仍完整可取,相关配置与解密密钥也应匹配。发布策略应给旧数据一个回退保留窗口,而不是更新映射后立即 unpin。反向恢复最新增量时保存新根清单,避免回滚把后来写入的数据永久遗忘。

恢复从副本或 CAR 开始时,先导入工作目标、审查逐根结果、确认递归保留,再离线完整读取。若使用了网络补齐,记录实际来源并重新离线验收。完成后再验证在线用户路径,不能只有仓库校验通过就恢复全部流量。

切换前核对备用来源的容量与网络预算,避免内容完整但无法承担接管后的负载。成功恢复一个练习文件不能代替对真实业务规模的评估。

演练记录决定可用性

演练应记录目标恢复时间、实际用时、数据范围和失败点,未完成的环节保持待办。测试环境必须能回到原状态,生产切换则需要业务维护与明确责任人。本节只实跑条件判断,未执行真实节点回滚或故障演练。

练习给一次迁移后新增三个根的场景写增量盘点和回退步骤。依据见官方迁移身份与回退说明及CAR 导入实现,回滚应保护最新业务数据,而不是仅把进程恢复到旧状态。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

为持久化故障准备回滚方案

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通