PostgreSQL / 系统课时
设计锁等待超时边界
设计锁等待超时边界
锁竞争无法完全消失,但等待必须有边界。lock_timeout、statement_timeout 与 idle_in_transaction_session_timeout 分别约束锁等待、整条语句和事务内空闲会话;把三者放在正确层次,才能既快速失败,又避免误杀正常慢查询或连接池。
学习目标
- 区分三种超时各自开始计时和触发的条件
- 设计
lock_timeout < statement_timeout的组合边界 - 验证锁等待超时、语句超时与事务内空闲超时的实际行为
三个超时不是同一层保护
lock_timeout 只在语句等待获取锁时计时,而且每次锁获取尝试分别计算;statement_timeout 从服务器开始处理命令后约束整条语句,因此执行慢、等待锁或其他原因导致语句过久都可能触发。idle_in_transaction_session_timeout 则只针对已经处于事务中、但客户端迟迟不再发送下一条命令的会话,并在超时后终止整个会话。
| 参数 | 保护对象 | 典型结果 |
|---|---|---|
lock_timeout |
锁等待 | 取消当前语句 |
statement_timeout |
整条语句执行 | 取消当前语句 |
idle_in_transaction_session_timeout |
事务内空闲会话 | 断开会话并释放事务资源 |
因此,三者不是互相替代。在线请求常见的设计是让锁等待预算最短、语句总预算更长,例如 800ms 与 5s;事务内空闲超时则按应用最长正常停顿单独设置,例如几十秒。具体值必须来自业务延迟 SLO 与历史分位数,而不是照抄固定数字。
先让锁等待更早失败
下面实验需要两个 psql 会话,并假设当前 schema 中不存在 timeout_demo。先在任一会话建立测试表:
CREATE TABLE timeout_demo (
id bigint PRIMARY KEY,
value integer NOT NULL
);
INSERT INTO timeout_demo(id, value) VALUES (1, 10);预期输出
CREATE TABLE
INSERT 0 1会话 A 持有目标行且暂不提交:
BEGIN;
UPDATE timeout_demo SET value = value + 1 WHERE id = 1;预期输出
BEGIN
UPDATE 1会话 B 设置两个边界后更新同一行:
SET lock_timeout = '500ms';
SET statement_timeout = '5s';
UPDATE timeout_demo SET value = value + 1 WHERE id = 1;预期输出
SET
SET
ERROR: canceling statement due to lock timeout因为 lock_timeout 更短,锁等待会先在约 500 毫秒处失败,而不是一直等到 5 秒的语句总预算耗尽。测试结束后在会话 A 执行 ROLLBACK; 释放锁。
再限制真正的慢语句
statement_timeout 用来给完整 SQL 设置“总预算”。它不仅覆盖锁等待,也覆盖执行计划本身耗时,因此应比正常查询的高分位耗时留出合理余量,避免把正常慢查询当成锁故障。
SET statement_timeout = '200ms';
SELECT pg_sleep(1);预期输出
SET
ERROR: canceling statement due to statement timeout这个例子没有锁竞争,却仍会超时,正好说明它与 lock_timeout 的职责不同。生产中更适合按应用角色、连接属性或事务局部设置,而不是不加区分地给所有会话使用同一个很小的全局值。
给事务内空闲会话最后一道保险
连接已经 BEGIN,完成了一次写操作,然后应用线程因为异常、人工等待或逻辑漏洞长时间不再发 SQL,这时前两个超时都不会继续计时,因为没有正在执行的语句。idle_in_transaction_session_timeout 专门处理这类状态。
在测试会话中执行:
SET idle_in_transaction_session_timeout = '1s';
BEGIN;
SELECT 1;预期输出
SET
BEGIN
?column?
----------
1
(1 row)随后保持该会话超过 1 秒不发送任何命令,再尝试输入 SELECT 2;,连接会被服务器终止。不同客户端的断线文案可能不同,psql 常见表现类似:
FATAL: terminating connection due to idle-in-transaction timeout
server closed the connection unexpectedly这一参数会直接关闭连接,所以连接池必须能够识别失效连接并重新建立会话。它的取值也应明显高于应用正常的事务内思考时间,否则会把合法事务当成泄漏。
用分层预算而不是一个万能数字
设计时先确定请求总时限,再从中分配数据库语句预算与锁等待预算。一个常见关系是 锁等待预算 < 语句预算 < 上游请求预算;事务内空闲超时属于另一条防泄漏边界,不必强行与前两者按比例绑定。
对于高价值批处理、DDL 或维护任务,可以使用更长的语句预算,但仍给锁等待设置合理上限;对于在线接口,则应让锁冲突尽快暴露,并由应用决定重试、降级还是返回可重试错误。超时不是消除竞争,而是把无限等待变成可观测、可处理的失败边界。