操作系统 / 系统课时
调好 listen 队列与 backlog
调好 listen 队列与 backlog
listen(backlog) 不是“服务器最多只能有多少连接”,而是影响已经完成握手、尚未被应用 accept 的等待队列。要扛住突发建连,需要同时看应用的 accept 速度、backlog、net.core.somaxconn,以及半连接阶段的内核限制,不能只把一个数字调大。
学习目标
- 区分 SYN 半连接队列、已完成连接的 accept 队列和应用处理速度。
- 理解
listen(backlog)与net.core.somaxconn的共同限制。 - 用
ss观察监听队列,并根据溢出信号决定是否调参。
backlog 只解决建连链路的一段
在 Linux 上,listen(fd, backlog) 主要限制已完成 TCP 握手、等待应用调用 accept 的连接队列;传入值还会受到 net.core.somaxconn 的上限约束。SYN 已到达但三次握手尚未完成的半连接属于另一段,主要受 net.ipv4.tcp_max_syn_backlog 等机制影响,启用 SYN cookies 时行为还会进一步变化。
因此,连接突发时至少有三处可能成为瓶颈:半连接阶段装不下、握手完成后 accept 队列装不下、应用 accept 太慢导致队列迟迟排不出去。把 backlog 从 128 改成 4096 只能增加缓冲空间,不能修复事件循环卡死、单线程长时间做 CPU 工作这类根因。

先用一个小实验看队列
下面的脚本创建一个 backlog=8 的监听 socket,但故意 8 秒不调用 accept。随后连续尝试建立多条本地连接,并用 ss 读取监听 socket 的 Recv-Q。在 Linux 的监听 socket 输出中,Recv-Q 可用来观察当前等待 accept 的连接数量;Send-Q 的展示会受工具和运行环境影响,因此不要把它当作唯一的 backlog 配置来源。
set -e
printf 'somaxconn='
cat /proc/sys/net/core/somaxconn
printf 'tcp_max_syn_backlog='
cat /proc/sys/net/ipv4/tcp_max_syn_backlog
cat > backlog_server.c <<'EOF'
#include <arpa/inet.h>
#include <stdio.h>
#include <stdlib.h>
#include <sys/socket.h>
#include <unistd.h>
int main(int argc, char **argv) {
/* backlog 作为参数传入,便于重复实验不同队列请求值。 */
int backlog = argc > 1 ? atoi(argv[1]) : 8;
int fd = socket(AF_INET, SOCK_STREAM, 0);
if (fd == -1) {
perror("socket");
return 1;
}
/* 避免短时间重跑实验时被旧地址状态影响。 */
int one = 1;
setsockopt(fd, SOL_SOCKET, SO_REUSEADDR, &one, sizeof(one));
struct sockaddr_in addr = {
.sin_family = AF_INET,
.sin_port = htons(9091),
};
inet_pton(AF_INET, "127.0.0.1", &addr.sin_addr);
if (bind(fd, (struct sockaddr *)&addr, sizeof(addr)) == -1 ||
listen(fd, backlog) == -1) {
perror("bind/listen");
return 1;
}
printf("listening on 127.0.0.1:9091, backlog=%d; accept paused\n", backlog);
fflush(stdout);
/* 故意不 accept,让已完成握手的连接堆积在监听队列中。 */
sleep(8);
close(fd);
return 0;
}
EOF
cc -O2 -Wall -Wextra backlog_server.c -o backlog_server
./backlog_server 8 &
SERVER_PID=$!
sleep 0.2
python3 - <<'PY' &
import socket
import time
sockets = []
for _ in range(20):
s = socket.socket()
s.settimeout(0.2)
try:
s.connect(("127.0.0.1", 9091))
sockets.append(s)
except OSError:
s.close()
print(f"client connections completed: {len(sockets)}", flush=True)
time.sleep(3)
for s in sockets:
s.close()
PY
CLIENT_PID=$!
sleep 1
ss -lnt 'sport = :9091'
wait "$CLIENT_PID"
kill "$SERVER_PID" 2>/dev/null || true
wait "$SERVER_PID" 2>/dev/null || true预期输出
somaxconn=<VALUE>
tcp_max_syn_backlog=<VALUE>
listening on 127.0.0.1:9091, backlog=8; accept paused
State Recv-Q Send-Q Local Address:Port Peer Address:Port
LISTEN <QUEUED> <SENDQ> 127.0.0.1:9091 0.0.0.0:*
client connections completed: <COUNT><VALUE>、<QUEUED>、<SENDQ> 和 <COUNT> 会随内核、iproute2 版本及执行时序变化。重点不是得到固定数字,而是看到应用暂停 accept 时 Recv-Q 会增长;当 accept 队列接近容量边界后,更多连接的建立时间和成功率开始恶化。应用请求的 backlog 以程序传给 listen 的值为准,内核封顶值则读取 net.core.somaxconn。
调参时把应用值和内核上限对齐
实际部署时,先根据峰值建连速率和应用可能暂停 accept 的最长时间估算需要的缓冲,再给 listen 传入足够的 backlog。随后确认 net.core.somaxconn 不小于应用希望使用的值,否则较大的 listen 参数会被内核上限截住。
只有在 SYN 阶段本身出现压力时,才需要重点检查 net.ipv4.tcp_max_syn_backlog、SYN cookies、重传和防火墙行为。把半连接参数与 accept 队列参数一起无脑放大,会增加内存占用,却可能完全绕过真正的瓶颈。
用溢出指标判断该调哪里
队列调优应和运行时证据配合。监听期间可以持续观察 ss -lnt 的 Recv-Q,并关注 /proc/net/netstat 中的 ListenOverflows、ListenDrops 是否增长。如果队列长期接近上限且这些计数增加,说明应用侧确实在错过建连突发。
如果 Recv-Q 很低却仍出现连接超时,问题更可能在半连接阶段、网络路径或负载均衡层;如果 Recv-Q 很高且事件循环 CPU 饱和,应先提升 accept 与请求分发能力。backlog 是吸收短时突发的缓冲,不是替代应用吞吐能力的容量开关。