操作系统 / 系统课时
理解多核负载均衡与亲和性
理解多核负载均衡与亲和性
多核机器并不是把所有可运行任务塞进一个全局队列后平均分配。调度器要在“让空闲 CPU 接到工作”和“尽量别把刚热起来的任务搬走”之间取舍。本篇从每核运行队列出发,建立任务迁移、缓存局部性与 CPU 亲和性的统一判断框架。
学习目标
- 解释每核运行队列为什么需要负载均衡与任务迁移
- 说明缓存局部性、CPU 拓扑与迁移成本之间的关系
- 判断 CPU 亲和性何时能带来收益,以及何时会制造热点
从每核运行队列理解负载均衡
常见多核调度器会让每个逻辑 CPU 维护自己的可运行任务集合。这样做能减少所有 CPU 争用一把全局队列锁,也让“这个任务刚在哪个 CPU 上跑过”成为可利用的局部信息。
问题是,任务进入、睡眠和唤醒都具有随机性。某一时刻可能出现 CPU 0 排着多个可运行任务,而 CPU 1 已经空闲。如果完全不迁移,空闲核得不到工作,整体吞吐和响应时间都会变差。因此调度器需要在合适时机比较负载,并把可迁移任务送到更合适的 CPU。

这里的“负载”不能简单理解为任务数量。两个队列都只有一个任务,其中一个可能几乎不占 CPU,另一个却持续计算。实际调度器通常还会结合任务权重、近期利用率和处理器拓扑来判断是否值得迁移。
任务迁移为什么既有收益也有成本
负载均衡常见于空闲 CPU 寻找工作、任务唤醒时选择目标 CPU,以及周期性检查不均衡等场景。迁移的直接收益是减少某些 CPU 的排队时间,让更多处理器并行工作。
迁移也会破坏局部性。任务刚在某个 CPU 上执行过时,它的指令、数据和页表相关内容可能仍在该 CPU 附近的缓存或 TLB 中。搬到另一个核心后,新的 CPU 需要重新填充这些工作集;跨 NUMA 节点迁移时,还可能让内存访问变得更远。
因此“越均匀越好”并不成立。轻微的不均衡有时值得保留,因为避免一次昂贵迁移比立即追求队列长度一致更划算。调度器的目标是综合吞吐、延迟与局部性,而不是让每个队列看起来一样长。
亲和性改变任务的可选 CPU 集合
CPU 亲和性可以把一个任务允许运行的 CPU 限定为某个集合。若任务只允许在 CPU 2 和 CPU 3 上运行,那么负载均衡即使发现 CPU 0 空闲,也不能把它迁移到 CPU 0。当操作系统接口提供的是硬亲和性约束时,它不是“优先建议”,而是调度器必须遵守的放置边界。
显式绑核的价值在于缩小调度器的选择空间。对工作集稳定、对抖动敏感,或与某个中断、设备队列、分片数据强关联的线程,固定在少量 CPU 上可能提高缓存命中率并降低迁移抖动。
副作用也很直接:一旦被允许的 CPU 忙满,其他空闲 CPU 可能帮不上忙。绑核过细还会让多个原本互不干扰的线程挤在同一个物理核心或同一个 NUMA 节点,造成新的竞争。
缓存局部性与拓扑要一起看
“同一 CPU”通常局部性最好,但多核系统存在层次结构。两个逻辑 CPU 可能共享一个物理核心,多个核心可能共享末级缓存,而跨 NUMA 节点则可能意味着更高的内存访问代价。因此迁移距离不同,代价也不同。
做容量规划时,要区分逻辑 CPU 数量与真正可并行的物理资源。把两个高计算线程绑到同一物理核心的两个 SMT 线程上,表面看使用了两个 CPU 编号,实际上仍可能争用执行端口和缓存。反过来,把强共享数据的线程放得过远,也会增加缓存一致性流量。
什么时候值得绑核
可以先问四个问题:任务是否长期运行而且工作集稳定;迁移是否确实造成可观的尾延迟或缓存失效;任务与中断、设备队列或内存节点是否存在明确的局部关系;限制 CPU 后是否仍有足够容量吸收峰值。
如果这些条件没有明确证据,优先让调度器保留迁移空间通常更稳妥。绑核最有价值的场景不是“CPU 多”,而是你已经知道任务应该靠近什么资源,并且愿意接受失去自动负载均衡弹性的代价。