P2P 与分布式存储 / 系统课时
定期验证内容真的还能获取
定期验证内容真的还能获取
副本建立时通过验收,不代表一年后仍可恢复。本节设计关键根必查、其他根轮换覆盖的定期验证,把抽样范围、内容读取和失败处置写入同一工作流,让检查持续发现真实缺口。
学习目标
- 制定有覆盖周期的根抽样计划。
- 对样本完成限制来源的完整恢复并保存证据。
抽样不是完整性承诺
关键根、刚发布的新版本和首次建立副本适合完整检查;普通历史根可以按风险轮换。固定只查几个容易读取的小文件,会长期漏掉大 DAG 和冷数据。每轮记录被查根与未查范围,给所有普通根安排覆盖周期。
下面 Node.js 程序使用教学标签安排轮换,不是有效 CID 清单,也不读取 Kubo。保存为 schedule.cjs 后执行 node schedule.cjs。critical 每轮必查,ordinary 每两轮全部覆盖;实际预算应按数据大小与时间调整。
const critical = ['contract'];
const ordinary = ['a', 'b', 'c', 'd'];
const width = 2;
for (let round = 0; round < 3; round++) {
// 以根清单版本为基准轮换,生产变更后应重新核对覆盖。
const start = (round * width) % ordinary.length;
const chosen = Array.from({length: width}, (_, i) => ordinary[(start + i) % ordinary.length]);
console.log(`round ${round}: ${[...critical, ...chosen].join(',')}`);
}预期输出:
round 0: contract,a,b
round 1: contract,c,d
round 2: contract,a,b真实清单变化后要保存版本,否则数组顺序变化可能让某些根反复被跳过。抽样成功不能证明未查部分全部完整;报告应给出本轮查了什么、通过多少以及最近一次全量验证时间。
样本必须完整读取
以下 Bash 片段依赖 Kubo 0.43.1、已停机的专用练习副本、真实文件根和可信原件;路径及根须替换。它演示一个样本的离线恢复,真实 Kubo 检查本节未执行;生产监控可在专用工作副本或安排好的窗口运行。
set -euo pipefail
export IPFS_PATH='/absolute/path/to/practice-replica'
cid='REPLACE_WITH_REAL_FILE_CID'
original='/absolute/path/to/trusted-original.txt'
audit="$(mktemp -d)"
ipfs --offline pin ls --type=recursive "$cid" > "$audit/pin.txt"
ipfs --offline cat "$cid" > "$audit/restored.txt"
cmp "$original" "$audit/restored.txt"
printf 'sample full restore passed\n'预期输出:
sample full restore passed本例读取到结束,目录需要完整目录清单比对。公开网关或在线 cat 可能补齐缺块,不能替代指定副本的离线检查;检查线上服务能力时另用空请求方和受控来源,保存路径证据,不与本地结果混合。
抽样预算应包含完整读取、摘要计算和输出空间。不能为了缩短窗口只读文件开头并仍标成完整恢复。对分块大文件,缺失可能恰好发生在最后几个块,完整读取到结束才能发现。
当清单中加入新根或撤销旧根,轮换状态也要随版本重新核对。记录上次覆盖位置、下一批候选和清单版本,避免调度重启后总是从头检查同一组对象。