MySQL / 系统课时
评估 redo、binlog 与 IO 压力
评估 redo、binlog 与 IO 压力
一次在线 DDL 即使允许业务继续读写,也可能把存储、日志和缓存资源推到饱和。本节把重建或索引构建拆成 redo、binlog、buffer pool、IO 与 CPU 五条压力链,并给出上线前应采集的基线和停手条件。
学习目标
- 区分 DDL 自身读写、并发 DML 与复制链路分别制造的资源压力
- 用 MySQL 状态变量建立 redo、buffer pool 与 IO 基线
- 根据业务延迟、日志余量和副本状态确定执行窗口与终止条件
拆开看五条压力链
表重建或索引构建首先会扫描聚簇索引,随后进行排序、创建新页并写入目标结构。这会直接占用读 IO、写 IO 和 CPU;扫描还会把大量页带入 buffer pool,与线上热点页竞争缓存。若缓存被冷数据挤占,业务查询即使没有改变 SQL,也可能出现更多物理读。
并发 DML 是另一条链路。业务写入仍要生成 redo,并在开启二进制日志时产生 binlog;在线 DDL 还要在结束前收敛变更。需要特别避免一个误区:不能把“重建了多少数据页”直接等同于“会产生同样大小的 binlog”。物理重建、事务 redo、DDL 日志和并发 DML 的记录机制不同,应该分别观测。

这张关系图的核心是“分账”:DDL 自身的扫描与写页决定基础 IO/CPU 压力;业务写流量决定额外 redo 与 binlog 压力;两者叠加后才是维护窗口里的真实峰值。
采集变更前基线
至少在与计划窗口相似的业务时段采样一次基线。下面的 SQL 同时读取 redo 写入、buffer pool 读写和并发线程状态,并确认 redo 容量、binlog 是否启用以及当前 binlog 格式。
SHOW GLOBAL STATUS
WHERE Variable_name IN (
'Innodb_os_log_written',
'Innodb_os_log_pending_writes',
'Innodb_os_log_pending_fsyncs',
'Innodb_buffer_pool_read_requests',
'Innodb_buffer_pool_reads',
'Innodb_pages_read',
'Innodb_pages_written',
'Threads_running'
);
SHOW GLOBAL VARIABLES
WHERE Variable_name IN (
'innodb_redo_log_capacity',
'log_bin',
'binlog_format'
);预期结果
第一条结果集返回所查询的状态变量及其当前累计值;第二条结果集至少应包含 innodb_redo_log_capacity、log_bin 和 binlog_format 三项对应值。具体数值、行顺序与实例配置有关。这些状态大多是累计值,单次快照本身不能代表速率。上线评估应固定采样间隔计算增量,例如用两次 Innodb_os_log_written 的差值除以间隔秒数得到 redo 写入速率;buffer pool 物理读同理用 Innodb_buffer_pool_reads 的增量观察。
判断资源余量是否够用
redo 重点看“写入速率、待处理写入、刷盘延迟与容量”是否一起恶化。只有 redo 写得快并不一定危险;如果待写和待 fsync 持续堆积、业务提交延迟同步上升,就说明日志设备已经接近瓶颈。此时继续扩大 DDL 并发只会把恢复空间进一步压缩。
buffer pool 重点看业务热页是否被 DDL 顺序扫描挤出。若 DDL 开始后 Innodb_buffer_pool_reads 增速明显高于基线,同时核心查询延迟上升,应优先降低 DDL 强度或更换低峰窗口,而不是简单扩大缓存后继续顶住。
IO 与 CPU 要和数据库指标一起看。持续高磁盘利用率、写延迟上升、IO 队列拉长,说明 DDL 的临时排序、数据页写入和后台刷脏正在争抢设备;CPU 长时间接近业务安全上限时,索引排序、压缩和页处理也可能让请求线程拿不到足够调度时间。
binlog 需要与复制链路一起评估。DDL 事件会进入二进制日志,副本还需要执行相应结构变更;与此同时业务 DML 继续产生自己的 binlog。源库看起来还能承受,并不代表副本没有落后,因此复制延迟、relay log 增长和副本磁盘余量都必须进入同一观察窗口。
确定执行窗口与停手条件
不要用“CPU 还没到 100%”作为上线标准。更稳妥的是先记录业务正常时的基线,再定义相对恶化边界和绝对资源下限。阈值应该来自现网 SLO、磁盘容量和历史变更,而不是照搬通用百分比。
| 信号 | 继续执行的前提 | 需要降速或终止的现象 |
|---|---|---|
| 业务延迟 | 核心接口仍在允许范围 | 延迟持续越过业务 SLO |
| redo | 写入可被稳定刷出 | pending write 或 fsync 持续堆积 |
| buffer pool | 物理读增幅可接受 | 热点查询伴随物理读明显放大 |
| 数据盘与临时盘 | IO 延迟和剩余空间有余量 | 队列、延迟或磁盘水位触发预设下限 |
| 复制 | 副本能跟上且有执行 DDL 的窗口 | 延迟持续扩大或副本资源接近上限 |
| CPU | 仍保留业务突发余量 | 长时间占满安全余量并拖慢请求 |
执行窗口的最终判断应同时满足三件事:主库有资源余量、业务指标有回退空间、副本能承受同一次结构变更。只盯某一个 redo 或 IO 指标,都不足以证明在线 DDL 对整体链路是安全的。