PostgreSQL / 系统课时

认识连接耗尽的故障链

认识连接耗尽的故障链

这节建立连接耗尽的完整因果链:请求突增并不一定直接打垮 PostgreSQL,真正危险的是应用连接池持续扩张、等待请求堆积,最终把数据库连接上限和应用线程容量一起推到极限。

学习目标

  • 按时间顺序识别请求突增、池扩张、数据库连接逼近上限之间的因果关系
  • 区分数据库拒绝新连接与应用线程在连接池中等待这两类故障
  • 能用 PostgreSQL 视图验证连接上限、当前连接和状态分布

从流量突增到连接耗尽

故障通常不是一个瞬间动作,而是一条连续链路。请求量上升后,更多请求进入数据库阶段;如果连接池允许建立更多连接,数据库端连接数随之增长;当连接数逼近 PostgreSQL 的 max_connections 后,新连接开始失败或无法继续建立。此时应用请求会变慢,超时重试又可能制造更多请求,最终形成放大效应。

请求突增到连接耗尽的故障链

需要注意,连接池等待本身不等于数据库连接耗尽。比如池上限是 30,而数据库只使用了 20 个连接,后续请求只是因为前 30 个连接都被长事务占用而等待,这属于池内耗尽。只有当服务继续扩容或池上限过大,把数据库可接受的连接槽位也占满,才进一步演变成数据库侧连接耗尽。

更危险的情况是多个应用实例各自配置了较大的池。假设单实例池上限为 50,服务扩容到 10 个实例,理论上的应用侧连接上限就是 500。数据库即使配置了更高的 max_connections,还要为管理员、监控、迁移任务和其他业务预留连接,否则正常流量稍有波动就可能撞上上限。

用数据库确认是否逼近上限

可以先查看连接上限,再统计当前连接数量。下面的查询只依赖 PostgreSQL 内置能力,可直接执行。

sql
SELECT
  current_setting('max_connections')::int AS max_connections,
  count(*) AS current_connections
FROM pg_stat_activity;

预期结果

text
max_connections | current_connections
----------------+-------------------
200             | 187

这里的重点不是某个固定阈值,而是比较当前连接数与实例上限的距离,并结合业务连接需求判断是否存在容量风险。实际结果会随超级用户、后台任务、监控连接以及应用实例数量变化。

继续查看连接状态,有助于判断这些连接是在执行 SQL,还是大量闲置或等待。

sql
SELECT
  state,
  count(*) AS connections
FROM pg_stat_activity
GROUP BY state
ORDER BY connections DESC;

预期结果

text
state  | connections
-------+------------
idle   | 140
active | 35
       | 12

状态为空的条目可能对应尚未进入普通查询状态的连接,实际排查时应结合 client_addr、usename、application_name 和等待信息继续定位。这里最关键的异常信号是:大量连接存在,而 active 数量并没有同步增长。 这通常说明连接池或连接生命周期存在浪费,而不是数据库真的需要这么多执行并发。

故障为什么会反向拖垮应用

数据库连接变得稀缺后,请求通常不会立即消失,而是先进入连接池等待队列。等待时间增长后,HTTP 请求开始超时;客户端或网关可能重试;新请求继续进入应用,但它们拿不到数据库连接,于是更多工作线程、协程或任务停留在等待状态。

这会形成一个典型的反馈环:连接不足 → 请求等待 → 请求变慢 → 超时重试 → 请求更多 → 连接需求更高。所以连接耗尽治理不能只处理 PostgreSQL 的连接上限,还必须限制池大小、控制等待超时,并避免用无限重试去掩盖容量问题。

区分三种常见故障位置

连接耗尽至少要先判断发生在哪一层。应用连接池耗尽时,数据库可能仍有大量空闲容量;数据库连接上限耗尽时,应用建立新连接会失败;而数据库虽然连接数未满,但大量连接都在锁等待、I/O 或长事务中时,本质上是执行资源或事务生命周期问题,单纯继续增加连接只会让排队更严重。

因此排查时应同时看四组证据:请求量与超时、池的 active/idle/waiting、PostgreSQL 当前连接与 max_connections、连接对应的 SQL 和等待状态。只有四层证据能对上,才能确定真正的瓶颈位置。

连接耗尽治理的核心不是追求更高的 max_connections,而是让“请求并发、每实例池上限、实例数量、数据库可用连接预算”形成可计算的容量边界,并给等待、超时和重试设置明确的止损机制。

按自己的节奏,确认真正理解。

目录与阅读设置

记录一个想法

认识连接耗尽的故障链

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通