容器与云原生 / 系统课时
设计生产优先级体系
设计生产优先级体系
生产集群的优先级体系应表达业务重要性,而不是给每个团队分配一组随意数字。本课用有限的 PriorityClass 层级区分平台、核心业务、批处理与低优先任务,并明确哪些层级允许抢占、哪些只能提高排队优先级。
学习目标
- 用少量 PriorityClass 覆盖生产集群中的主要工作负载等级
- 为不同层级选择合理的优先级值与
preemptionPolicy - 建立限制高优先级使用和失控抢占的治理规则
先定义层级再定义数字
优先级首先表达相对顺序。生产环境通常不需要几十个等级;层级越多,越难解释一次抢占为什么发生,也越容易出现团队不断申请“再高一级”的优先级膨胀。
下面是一套便于治理的四层模型:
| 层级 | 示例值 | 抢占策略 | 适用对象 |
|---|---|---|---|
| platform-critical | 900000 | PreemptLowerPriority | 必须维持平台基本能力的自建组件 |
| business-critical | 600000 | PreemptLowerPriority | 核心在线服务 |
| batch-important | 300000 | Never | 有时效要求但不应主动中断在线业务的批处理 |
| background-low | 100000 | Never | 可延迟的离线与后台任务 |
自定义 PriorityClass 的 value 必须是不大于 1000000000 的 32 位整数;更高的值保留给 Kubernetes 内置的系统关键优先级。普通业务也不应仿照 system-node-critical、system-cluster-critical 建类,名称不要使用 system- 前缀。
preemptionPolicy: PreemptLowerPriority 允许调度器在必要时选择较低优先级 Pod 作为抢占受害者;Never 则保留较高的调度队列优先级,但不会主动驱逐低优先级 Pod 来腾出资源。
创建有限的 PriorityClass 集合
下面的主示例把主动抢占能力限制在平台关键和核心业务两个层级,同时让批处理与后台任务只获得队列顺序差异。
apiVersion: scheduling.k8s.io/v1
kind: PriorityClass
metadata:
name: platform-critical
value: 900000
preemptionPolicy: PreemptLowerPriority
globalDefault: false
description: "Self-managed platform components required for cluster services."
---
apiVersion: scheduling.k8s.io/v1
kind: PriorityClass
metadata:
name: business-critical
value: 600000
preemptionPolicy: PreemptLowerPriority
globalDefault: false
description: "Core online business workloads."
---
apiVersion: scheduling.k8s.io/v1
kind: PriorityClass
metadata:
name: batch-important
value: 300000
preemptionPolicy: Never
globalDefault: false
description: "Time-sensitive batch workloads without active preemption."
---
apiVersion: scheduling.k8s.io/v1
kind: PriorityClass
metadata:
name: background-low
value: 100000
preemptionPolicy: Never
globalDefault: false
description: "Delay-tolerant background workloads."这里的 preemptionPolicy 必须位于 PriorityClass 顶层,并使用合法值 PreemptLowerPriority 或 Never。保存清单为 <PATH> 后应用并检查排序。以下预期结果按四个 PriorityClass 首次创建计算;重复执行时 created 可能变为 unchanged。
kubectl apply -f <PATH>
kubectl get priorityclass -o custom-columns='NAME:.metadata.name,VALUE:.value,PREEMPTION:.preemptionPolicy' --sort-by=.value预期输出中会包含以下内容;集群内置 PriorityClass 也可能同时显示。
priorityclass.scheduling.k8s.io/platform-critical created
priorityclass.scheduling.k8s.io/business-critical created
priorityclass.scheduling.k8s.io/batch-important created
priorityclass.scheduling.k8s.io/background-low created
NAME VALUE PREEMPTION
background-low 100000 Never
batch-important 300000 Never
business-critical 600000 PreemptLowerPriority
platform-critical 900000 PreemptLowerPriority把优先级绑定到服务等级
PriorityClass 应由平台团队集中定义,工作负载只引用稳定名称。业务团队申请 business-critical 时,应说明不可用影响、最低容量需求以及是否确实允许牺牲低优先级任务;不能因为“希望更快调度”就自动获得抢占能力。
对于允许抢占的层级,还要同时评估 PodDisruptionBudget、终止宽限期和应用恢复成本。抢占会触发受害 Pod 终止,但资源不一定立即释放;如果受害 Pod 需要较长时间优雅退出,高优先级 Pod 仍可能继续等待。
防止优先级膨胀
治理重点不是把最大值设置得足够大,而是限制谁能使用高等级。可以结合准入策略、ResourceQuota 或统一发布流程约束 PriorityClass 的使用,并持续观察高优先级 Pod 数量、Pending 时长和抢占事件,确认高等级仍只服务于批准的场景。
globalDefault 也应谨慎使用。没有全局默认 PriorityClass 时,未指定 priorityClassName 的 Pod 优先级为零;设置全局默认后,只影响之后新创建且没有显式指定优先级类的 Pod。生产环境通常更适合显式引用类别,并把“未分类”视为需要修正的发布问题。
一个可治理的体系应让任何一次抢占都能回答三个问题:谁比谁重要、为什么允许中断、谁批准了这个类别。做到这一点,优先级才是容量紧张时的故障控制机制,而不是另一种资源争抢手段。