PostgreSQL / 系统课时

判断是否需要重写表文件

判断是否需要重写表文件

归档删除完成后,如果表内部已经释放大量空间,但业务又明确要求降低实际磁盘占用,就需要评估是否重写表文件。本课比较 VACUUM FULL、CLUSTER 与在线重建,重点判断空间收益是否值得承担锁、磁盘峰值和维护窗口成本。

学习目标

  • 判断什么情况下普通 VACUUM 已经足够
  • 比较 VACUUM FULL、CLUSTER 与在线重建的关键约束
  • 在执行重写前检查锁风险和额外磁盘需求

先确认是否真的需要重写

表文件没有因为归档删除而缩小,并不意味着必须立即处理。普通 VACUUM 会让死亡元组占用的空间重新变成表内可复用空间;如果后续写入还会增长,这部分容量可以直接被新数据利用,没有必要为了缩小文件而承担一次大规模重写。

真正值得考虑重写的场景通常同时满足两个条件:已经释放的空间规模足够大,而且未来较长时间内不会重新增长到原来的数据量。例如历史数据一次性迁出后,主表从数百 GB 永久下降到几十 GB,此时持续保留原文件尺寸才可能形成明确的磁盘回收收益。

先记录关系和索引大小作为基线:

sql
SELECT pg_size_pretty(pg_relation_size('target_table')) AS heap_size,
       pg_size_pretty(pg_indexes_size('target_table')) AS indexes_size,
       pg_size_pretty(pg_total_relation_size('target_table')) AS total_size;

预期结果

text
heap_size | indexes_size | total_size
----------+--------------+-----------
<VALUE>   | <VALUE>      | <VALUE>

实际大小取决于目标表、索引数量以及当前数据规模。还应结合表膨胀评估和未来容量趋势判断:只有确认可归还给操作系统的空间足以覆盖维护成本,才应继续选择重写方式。

三类方案的核心差异

VACUUM FULL 会把表内容重写到新的紧凑物理文件中,从而缩小表文件,但执行期间需要对目标表持有 ACCESS EXCLUSIVE 锁,普通查询和写入都会受到阻塞。它适合能够安排明确维护窗口、并希望使用 PostgreSQL 内置命令完成空间回收的场景。

CLUSTER 同样会重写表文件,但会按照指定索引的顺序重新排列存活行。除了压紧表文件,它还可能改善与该索引顺序一致的范围访问局部性;不过它同样需要 ACCESS EXCLUSIVE 锁,而且聚簇后的物理顺序不会随着后续写入自动保持。

在线重建通常借助额外表、逻辑复制或专门的在线重组工具,让旧表继续服务,在旁路构建紧凑副本,最后通过受控切换替换旧对象。这类方案可以把长时间的数据复制阶段移出独占锁窗口,但实现、监控、失败恢复和额外磁盘要求都更高。

方案 主要收益 主要锁风险 额外磁盘 典型适用场景
VACUUM FULL 压紧表文件并回收空间 长时间 ACCESS EXCLUSIVE 需要容纳重写过程的额外空间 有维护窗口、优先使用简单内置方案
CLUSTER 回收空间并按索引物理排序 长时间 ACCESS EXCLUSIVE 需要容纳重写及索引处理 同时希望改善特定访问路径的数据局部性
在线重建 将耗时的数据复制移到旁路完成 最终切换阶段仍需锁 通常需要接近完整副本的额外空间 大型生产表、停机预算很小

大表重写方案选择路径

重写前检查锁和磁盘

不要直接在生产大表上执行重写命令。首先检查是否存在长期事务或长时间运行的语句,因为它们可能让需要 ACCESS EXCLUSIVE 锁的维护命令长时间排队;而维护命令一旦进入锁等待队列,还可能影响后续请求的锁获取顺序。

sql
SELECT pid,
       now() - xact_start AS transaction_age,
       state,
       wait_event_type,
       wait_event
FROM pg_stat_activity
WHERE xact_start IS NOT NULL
  AND pid <> pg_backend_pid()
ORDER BY xact_start;

预期结果

text
pid  | transaction_age | state   | wait_event_type | wait_event
-----+-----------------+---------+-----------------+-----------
<ID> | <VALUE>         | <VALUE> | <VALUE>         | <VALUE>

若没有其他已开启事务,结果可能为空;PID、持续时间、状态和等待事件均为动态值。实际执行前还应结合业务窗口确认是否存在可能阻止强锁及时获得的长查询,并设置合适的 lock_timeout 或运维中止条件,避免维护操作无限等待。

同时要预留足够的峰值磁盘空间。表重写并不是简单地在原文件内部压缩,而是生成新的物理表示并在完成后替换旧文件;索引处理、WAL、临时文件,以及存在复制槽时的 WAL 保留,都可能进一步抬高执行期间的空间占用。

维护窗口内的直接重写

如果已经确认可以接受独占锁,VACUUM FULL 是最直接的内置空间回收方式。下面命令会重写目标表,因此只应在已经评估业务停顿影响并确认磁盘余量后执行。

sql
VACUUM (FULL, ANALYZE) target_table;

预期结果

text
VACUUM

执行完成后再次查询 pg_relation_size 和 pg_total_relation_size,应看到关系文件被重新压紧后的尺寸。具体能减少多少,取决于存活数据量、行宽、填充情况以及索引结构。

如果还希望按照某个已有索引重排物理数据,可以选择 CLUSTER:

sql
CLUSTER target_table USING target_table_created_at_idx;
ANALYZE target_table;

预期结果

text
CLUSTER
ANALYZE

CLUSTER 同样属于表重写操作,不应把它当成低风险的日常整理命令。它的额外价值应来自真实查询能够受益于物理局部性,而不是仅仅为了让表的物理顺序更整齐。

什么时候应选择在线重建

当表足够大、写入持续,而且业务无法接受长时间 ACCESS EXCLUSIVE 锁时,直接运行 VACUUM FULL 或 CLUSTER 往往不是合适方案。此时应优先设计在线重建:旁路复制当前数据、持续同步增量、校验一致性,再在受控窗口中完成对象切换。

这种方案的核心收益不是“完全无锁”,而是把耗时最长的数据复制和重建阶段放在旧表仍可服务的时间段,把真正阻塞业务的阶段压缩到最终切换附近。代价则是额外磁盘、同步机制、失败恢复方案,以及更严格的一致性验证。

因此,大表归档后的默认顺序应是先让普通 VACUUM 回收表内可复用空间,再判断这些空间是否会被后续写入重新利用;只有明确需要把容量归还给操作系统时才考虑表重写。能接受维护窗口时优先选择更简单的直接重写,无法接受长时间强锁时再承担在线重建的工程复杂度。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

判断是否需要重写表文件

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通