可观测性与稳定性 / 系统课时
演练一次误删文件恢复
演练一次误删文件恢复
误删文件恢复演练可以同时检验备份是否找得到、文件能否真正恢复,以及权限和服务访问是否仍然正确。本节在隔离的练习目录中制造一次删除故障,再从预先准备的备份恢复文件,并用校验值和访问权限完成验收。
学习目标
- 按时间和内容确认应该使用哪个备份版本
- 在不覆盖备份源的前提下完成文件恢复
- 验证恢复后的内容、所有者、权限和服务读取能力
准备隔离的演练环境
不要在生产关键目录中制造误删。下面使用临时目录模拟业务文件,并把备份副本放到独立位置。示例要求 Linux 环境具备 cp、rm、sha256sum 和 stat。
mkdir -p /tmp/dr-lab/live /tmp/dr-lab/backup
printf 'release=v1\n' > /tmp/dr-lab/live/app.conf
chmod 640 /tmp/dr-lab/live/app.conf
cp -p /tmp/dr-lab/live/app.conf /tmp/dr-lab/backup/app.conf
sha256sum /tmp/dr-lab/backup/app.conf预期输出中的摘要与文件内容严格对应;路径前的 SHA-256 值如下。
67e85efc9500bb40802d621dbb16637b763e4e6d75860a7d7345e2fd977a3d5e /tmp/dr-lab/backup/app.conf真实环境通常还要记录备份时间、版本 ID 和保留策略。演练时应先确认恢复目标时间,再选择不晚于目标且已经通过完整性检查的备份,而不是简单选择目录里“最新”的文件。
模拟误删并确认故障
删除练习目录中的在线副本,然后确认目标确实不存在。这里的删除操作仅针对刚刚创建的 /tmp/dr-lab 隔离环境。
rm /tmp/dr-lab/live/app.conf
test ! -e /tmp/dr-lab/live/app.conf && printf 'target missing\n'预期输出:
target missing从备份恢复文件
恢复前不要修改备份源。使用 cp -p 可以在复制时保留源文件的模式、所有权和时间戳;但能否完整保留所有元数据仍取决于文件系统、权限和备份方式,因此恢复后必须重新验证。
cp -p /tmp/dr-lab/backup/app.conf /tmp/dr-lab/live/app.conf
sha256sum /tmp/dr-lab/live/app.conf预期输出:恢复文件的摘要应与备份副本一致。
67e85efc9500bb40802d621dbb16637b763e4e6d75860a7d7345e2fd977a3d5e /tmp/dr-lab/live/app.conf摘要一致说明当前示例中文件内容已经恢复,但还不能据此宣布业务恢复完成。服务可能依赖特定所有者、权限、目录访问权或安全策略,这些都需要单独检查。
验证权限和服务访问
先查看恢复文件的权限和内容。stat 使用固定格式输出,避免不同系统默认展示格式造成干扰;用户名和组名会随实际执行账户变化。
stat -c '%a %U %G' /tmp/dr-lab/live/app.conf
cat /tmp/dr-lab/live/app.conf预期输出中的用户和组取决于实际环境,但权限应为 640,内容应保持不变。
640 <USER> <GROUP>
release=v1真实服务还应使用服务账号执行一次只读访问,而不是只用管理员账号检查。例如确认服务账号能够读取配置文件、应用能够启动,并对健康检查或一个无副作用的查询执行验证。管理员能读取文件,并不能证明服务账号拥有相同权限。
记录演练验收结果
一次完整的误删恢复演练至少要留下恢复点、所选备份、开始与结束时间、内容校验结果、权限检查结果和业务验证结果。如果恢复过程中需要临时查找命令、申请权限或猜测备份版本,也应作为问题记录,而不是只记录“最终恢复成功”。
验收标准应同时包含“文件已经回来”和“业务能够正确使用文件”。只有内容校验一致、权限符合预期、服务账号可访问且业务检查通过,才算完成恢复;这样测到的才是实际恢复能力,而不只是备份文件存在。