Linux 与服务器运维 / 系统课时

进程数量为什么需要限制

进程数量为什么需要限制

服务不仅会创建进程,也可能创建大量线程或子进程。一旦线程池失控、循环 fork 或子进程没有被正确回收,单个服务就可能耗尽系统可创建的任务数量。systemd 可以通过 TasksMax= 给服务划出明确边界,让这类故障尽量停留在服务自身的控制组内。

学习目标

  • 理解 systemd 所说的 task 与进程、线程之间的关系
  • 说明 TasksMax= 如何限制服务能够同时拥有的任务数量
  • 能配置并验证一个服务的任务数量上限

为什么任务数量也属于资源

进程和线程都会占用内核数据结构、调度资源以及一定的内存。一个服务如果不断创建新线程,即使 CPU 和内存暂时没有达到显式限制,也可能让系统调度压力迅速增加,甚至使其他程序无法创建新的进程。

因此,限制“进程数”时不能只统计主进程。Linux 把能够被调度的进程和线程都视为 task,systemd 的 TasksMax= 正是按照这个口径限制一个单元中的任务总数。

例如,一个服务有 1 个主进程,主进程创建 4 个工作线程,同时还有 2 个子进程,那么它消耗的任务数量并不是 3,而至少是 7。子进程继续创建线程时,这些任务仍然计入同一个服务的控制范围。

TasksMax 对进程与线程统一计数的示意图

TasksMax 如何形成边界

在使用 Linux cgroup 的系统上,systemd 会把服务进程及其后代组织到对应的控制组中。TasksMax= 为这个单元设置任务数量上限,其底层由 cgroup 的 PID 控制机制执行。

达到上限不会自动杀掉已经存在的任务,而是阻止继续创建新的任务。应用随后可能在 fork()、clone() 或创建线程时收到失败结果,常见表现包括 Resource temporarily unavailable。因此,一个有线程泄漏的服务可能仍然保持运行,但无法继续创建新的工作线程。

用瞬时服务验证限制

下面创建一个临时服务,将任务上限设置为 32,再读取 systemd 实际生效的属性。命令需要在使用 systemd 作为系统管理器的 Linux 环境中执行。

bash
sudo systemd-run --unit=task-limit-demo --property=TasksMax=32 --collect /usr/bin/sleep 300 >/dev/null
systemctl show task-limit-demo.service -p TasksMax
sudo systemctl stop task-limit-demo.service >/dev/null

预期输出:

text
TasksMax=32

这里使用 sleep 300 只是为了让瞬时服务保持足够长的运行时间,以便查询属性;停止后,--collect 会允许 systemd 清理这个瞬时单元。

怎样确定合适的上限

不要把 TasksMax= 设置成“应用平时线程数”的精确值。Java、数据库客户端、监控组件以及运行时都可能临时增加线程,因此需要先观察正常高峰,再预留合理余量。运行中的服务可以通过 systemctl show <SERVICE> -p TasksCurrent -p TasksMax 对比当前任务数和限制值。

如果 TasksCurrent 长时间逼近上限,应先确认这是业务并发增长还是线程、子进程泄漏。简单提高 TasksMax= 只能延后故障,并不能修复不断创建任务的程序。真正合适的边界应当既容纳正常峰值,又能在失控扩张影响整机之前阻止服务继续创建任务。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

进程数量为什么需要限制

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通