PostgreSQL / 技术文章

PostgreSQL MVCC 为什么离不开 VACUUM

已经会用 PostgreSQL、却仍把 VACUUM 理解成“定期清垃圾”的工程师,通常会在长事务、表膨胀或事务年龄告警出现时误判根因。这里要解决的是 MVCC 与 VACUUM 为什么是同一套生命周期机制:读完后,你应能从“版本产生—可见性保留—安全回收—冻结保护”这条因果链判断一个问题究竟发生在并发语义、回收边界还是维护能力上。

MVCC 把并发冲突转换成版本问题

PostgreSQL 的核心选择不是让读事务和写事务围绕同一行反复互斥,而是让同一逻辑行在一段时间内存在多个物理 tuple version。INSERT 创建版本,UPDATE 通常创建新版本并让旧版本记录失效事务,DELETE 则让现有版本带上删除事务信息。xmin、xmax 与当前快照共同决定某个版本对当前语句是否可见。

这个设计把“读写互相等待”的一部分成本,转换成了“旧版本必须暂时保留”的成本。更新越频繁,版本产生越快;并发事务持续越久,旧版本需要保留得越久。HOT Update 可以在满足条件时减少索引维护,但它并没有取消 heap 中的多版本事实,因此也没有取消后续回收需求。

所以,死元组不是 PostgreSQL 偶然产生的脏数据,而是 MVCC 用空间换并发的必然副产品。只要系统持续 UPDATE 或 DELETE,就需要有另一个机制判断这些历史版本何时可以真正退出生命周期。

提交结束不等于旧版本已经可以删除

最容易混淆的是“对新事务不可见”和“可以物理回收”并不是同一件事。事务 T2 更新一行并提交后,新的快照通常会看到新版本;但如果事务 T1 更早取得快照并一直保持打开,T1 仍可能需要旧版本来重建它所处时间点的数据库视图。

因此,PostgreSQL 不能在 T2 提交时顺手删除旧版本。提交动作只能确定事务结果,不能证明所有仍存活的快照都不再需要旧版本。真正的回收条件必须参考一个全局安全边界:只有当某个旧版本已经不可能再被任何相关快照看到时,它才进入可安全回收的范围。

这也是为什么长事务会把“垃圾回收”问题变成“可见性边界”问题。复制槽、热备反馈或其他需要保留旧可见性的机制,同样可能让边界停在更老的位置。此时不断增加的 n_dead_tup 只是表象;根因不是 VACUUM 不知道怎么删,而是系统仍不能证明这些版本可以删。

VACUUM 是 MVCC 的安全垃圾回收器

普通 VACUUM 的关键职责不是“删除所有旧行”,而是沿着当前安全边界识别已经不可见且不会再被需要的版本,清理相关索引引用,并把 heap 中相应位置变成可复用空间。它做的是带可见性证明的垃圾回收,而不是按时间或数量粗暴清扫。

这也解释了一个常见现象:执行 VACUUM 后,表文件通常不会按 dead tuple 的数量等比例缩小。标准 VACUUM 的主要目标是让关系内部的空间可以被后续 INSERT 或 UPDATE 复用;只有文件尾部满足条件时才可能截断部分空页。需要重写整张表来强制压缩文件的 VACUUM FULL,是另一种代价更高、锁语义也不同的操作,不能把它当成普通 VACUUM 的“更彻底版本”。

索引同样处在这条生命周期中。普通 UPDATE 可能留下指向旧 heap version 的索引项,VACUUM 在确认对应 heap version 已可回收后,才能推进相关索引清理。于是 heap 膨胀和索引膨胀虽然表现不同,本质上都与“版本产生速度”和“安全回收速度”之间的差值有关。

VACUUM 还在维护未来的可见性成本

如果只把 VACUUM 看成空间回收,就会漏掉 PostgreSQL 更深的一层约束:MVCC 不仅要解释“现在谁能看到谁”,还要保证这套判断在事务 ID 持续循环使用时仍然成立。

PostgreSQL 的普通事务 ID 空间是有限的。长期存活的老 tuple 不能永远依赖一个普通 XID 与未来事务做年龄比较,因此 VACUUM 还负责冻结足够老、且其创建事务结果已经确定的存活 tuple。现代 PostgreSQL 通过冻结标记赋予这些 tuple 永久“足够老”的可见性语义,而不是简单依赖一个会无限增长的事务号。表级的 relfrozenxid 由此成为判断冻结进度与回卷风险的重要下界。

VACUUM 还会维护 Visibility Map。heap page 被确认对所有事务都可见时,可以设置 all-visible;所有 tuple 都完成冻结时,可以设置 all-frozen。前者让 Index-Only Scan 在命中合适页面时少访问 heap,后者减少未来冻结扫描的工作。换句话说,VACUUM 既在回收过去留下的版本,也在降低未来读取与维护这些版本的成本。

因此“表几乎不 UPDATE,所以不需要 VACUUM”也是错误推论。静态或只追加表可能没有明显死元组,但仍然存在冻结与可见性图维护需求。空间回收频率可以低,MVCC 生命周期维护却不能被无限期取消。

Autovacuum 是把生命周期约束变成控制环

Autovacuum 不是独立于 MVCC 的性能插件,而是把 VACUUM 与 ANALYZE 的维护需求自动化。它根据表的变化量、冻结年龄等信号安排 worker,让版本产生速度与版本回收速度尽量保持长期平衡。

理解这一点后,“Autovacuum 跟不上”就不应只翻译成“worker 太少”。如果旧快照把安全边界钉住,增加 worker 只会让更多进程更频繁地遇到同一个不可回收事实;如果热点表的版本产生速度远高于默认触发与处理能力,才需要讨论表级阈值、成本限制、worker 并发与 I/O 预算。两类问题都表现为 dead tuple 增长,但一个是回收资格不足,另一个是回收能力不足。

冻结进一步说明 Autovacuum 带有正确性保护性质。即使一张表几乎没有 UPDATE/DELETE,事务年龄逼近保护阈值时,PostgreSQL 仍需要推进反回卷 VACUUM。这里的目标不再是让查询快一点,而是避免普通 XID 的循环语义破坏可见性判断,最终影响写入可用性。

用一条因果链定位问题层级

实际排查时,最有用的不是记住更多 VACUUM 参数,而是先确认问题落在哪一层。可以把所有现象压缩成一个守恒关系:版本由业务写入产生,安全边界决定“哪些版本有资格回收”,VACUUM 能力决定“有资格的版本能多快回收”,冻结进度决定“存活版本能否继续安全跨越事务 ID 生命周期”。

下面这组统计可以作为入口,但它们只说明现象,不能单独证明根因:

sql
SELECT
    relname,
    n_live_tup,
    n_dead_tup,
    last_autovacuum,
    vacuum_count,
    autovacuum_count
FROM pg_stat_user_tables
ORDER BY n_dead_tup DESC
LIMIT 10;

看到 n_dead_tup 高时,先问“这些版本现在是否已经安全可回收”,再问“VACUUM 是否有足够机会和资源处理它们”;看到事务年龄持续上升时,则要把焦点从空间切换到冻结下界。这样就不会把长事务造成的 retention 问题误治成参数问题,也不会把真正的吞吐不足误判为快照问题。

最终可以把 PostgreSQL 的 MVCC 想成一条闭环:写事务制造新版本,快照定义历史版本的保留期限,VACUUM 在安全边界之后回收并复用空间,同时清理索引、维护 Visibility Map、冻结长期存活 tuple;Autovacuum 则负责让这个闭环持续运转。MVCC 让并发成为可能,VACUUM 让这种并发模型能够长期、稳定且可重复地运行。

目录与阅读设置

记录一个想法

PostgreSQL MVCC 为什么离不开 VACUUM

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通