MySQL / 系统课时

取消失败 DDL 并恢复现场

取消失败 DDL 并恢复现场

DDL 被 KILL、超时或异常终止后,真正的工作不是重新执行一次,而是确认原语句是否仍在回滚、元数据锁是否释放、目标表结构处于哪个版本,以及内部临时对象是否已清理。本篇给出从“停止语句”到“允许重试”的恢复检查顺序。

学习目标

  • 正确终止仍在执行的 DDL,并区分语句已结束与回滚已完成
  • 检查进程、事务、元数据锁、表结构和临时文件,避免带病重试
  • 用业务可用性与结构一致性作为重试前的最终门槛

先确认 DDL 还在不在

先找出实际执行 DDL 的连接 ID 和当前状态。生产环境不要凭应用连接池日志中的旧 ID 直接 KILL,因为连接 ID 可能已经被复用。

sql
SHOW FULL PROCESSLIST;

预期输出

text
Id    User     Time     State          Info
<ID>  <VALUE>  <VALUE>  <VALUE>        ALTER TABLE <VALUE>

确认 <ID> 对应的 SQL 文本、用户和目标表无误后,再终止当前语句:

sql
KILL QUERY <ID>;

预期输出

text
Query OK, 0 rows affected

KILL QUERY 只取消当前语句并保留连接;KILL CONNECTION <ID> 会连连接一起关闭。无论哪一种,返回 Query OK 都只表示终止请求已发出,不表示大型表重建已经瞬间清理完毕。

失败 DDL 从 KILL 到恢复与重试的检查流程

观察回滚和锁是否结束

大型 ALTER TABLE 被取消后,InnoDB 仍可能需要清理中间结果、释放空间或恢复数据字典状态。先重新查看进程列表;如果连接仍在且状态持续变化,说明清理还没有结束。

随后检查目标表上的元数据锁:

sql
SELECT
  OBJECT_SCHEMA,
  OBJECT_NAME,
  LOCK_TYPE,
  LOCK_DURATION,
  LOCK_STATUS,
  OWNER_THREAD_ID
FROM performance_schema.metadata_locks
WHERE OBJECT_SCHEMA = 'app'
  AND OBJECT_NAME = 'orders'
ORDER BY LOCK_STATUS, OWNER_THREAD_ID;

预期输出

text
OBJECT_SCHEMA  OBJECT_NAME  LOCK_TYPE  LOCK_DURATION  LOCK_STATUS  OWNER_THREAD_ID
app            orders       <VALUE>    <VALUE>        <VALUE>      <ID>

把 app.orders 替换成实际目标表。若仍有与失败 DDL 相关的长时间 GRANTED 或 PENDING 锁,先定位持有线程,不要马上重试第二个 ALTER TABLE,否则很容易把一次失败变成新的 MDL 阻塞链。

对怀疑仍在回滚的连接,也可以辅助查看 InnoDB 事务信息:

sql
SELECT
  trx_mysql_thread_id,
  trx_state,
  trx_started,
  trx_operation_state,
  trx_tables_locked,
  trx_rows_modified
FROM information_schema.innodb_trx
WHERE trx_mysql_thread_id = <ID>;

预期输出

text
trx_mysql_thread_id  trx_state  trx_started  trx_operation_state  trx_tables_locked  trx_rows_modified
<ID>                 <VALUE>    <TIME>       <VALUE>              <VALUE>            <VALUE>

查不到记录并不能单独证明 DDL 清理已经结束,因为不同 DDL 阶段暴露在事务视图中的方式不同。应把事务视图、进程状态、元数据锁和表结构一起判断。

核对最终表结构

MySQL 8.x 的 InnoDB DDL 具有原子 DDL 能力:正常支持范围内,数据字典变更会以“提交或回滚”的方式恢复。但运维上仍应验证最终结构,而不是根据错误信息猜测它停在了哪一步。

sql
SHOW CREATE TABLE app.orders\G

预期输出

text
Table: orders
Create Table: CREATE TABLE `orders` (
  <VALUE>
) ENGINE=InnoDB <VALUE>

把输出与发布前保存的基线 DDL 比较。如果目标索引、列或约束已经存在,说明原 DDL 可能已经成功提交,只是客户端超时或连接断开;此时再次执行同一变更可能得到“对象已存在”或造成重复操作。如果结构仍是旧版本,再继续做资源和业务检查。

只读检查临时对象,不手工删除

表重建过程中可能出现内部 #sql 中间文件。只有在自建 MySQL、拥有宿主机文件系统权限并明确知道数据目录时,才做只读检查:

bash
find <PATH> -maxdepth 2 -type f -name '#sql*' -print

预期输出

text
<PATH>/app/#sql-ib<ID>.ibd

没有输出也属于正常结果,表示未发现匹配文件。即使发现残留,也不要直接 rm。MySQL 8.x 的数据字典、表空间和 redo 恢复彼此有关联,手工删除 #sql、.ibd 或 redo 文件可能把可恢复现场变成数据字典与物理文件不一致。优先等待清理完成,必要时依据错误日志和官方恢复流程处理。

验证业务可用性后再重试

先做一个低成本读取,确认目标表能够正常打开并返回结果:

sql
SELECT *
FROM app.orders
LIMIT 1;

预期结果

text
<VALUE>

实际可能返回 0 行或 1 行;判断标准是查询能够完成且没有新的 MDL、表损坏或结构错误。随后还应检查复制状态、磁盘余量和核心业务接口,因为一次失败 DDL 可能已经造成副本积压或容量高水位。

满足以下条件后才进入重试:目标表结构与预期一致、失败 DDL 相关锁已释放、回滚或清理不再进行、磁盘与 I/O 恢复到安全区间、业务读写与复制恢复正常。重试前应重新评估 ALGORITHM、LOCK、变更窗口和止损阈值;如果第一次失败的根因没有被消除,原样重跑只是在重复同一个故障。

按自己的节奏,确认真正理解。

目录与阅读设置

记录一个想法

取消失败 DDL 并恢复现场

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通