容器与云原生 / 系统课时

理解软硬驱逐阈值

理解软硬驱逐阈值

kubelet 通过 evictionHard 和 evictionSoft 定义节点资源的危险边界,但两者的触发时间语义不同。掌握软阈值宽限、Pod 终止宽限和压力状态防抖后,才能区分瞬时资源波动与真正需要驱逐的资源危机。

学习目标

  • 区分 evictionHard 与 evictionSoft 的触发语义
  • 配置软阈值宽限时间和 Pod 最大终止宽限时间
  • 理解 evictionPressureTransitionPeriod 与软阈值宽限的职责差异

硬阈值与软阈值解决不同问题

evictionHard 用于守住节点最后的安全余量。资源信号满足硬阈值后,kubelet 不等待软阈值宽限时间,会立即进入节点级资源回收流程;如果回收仍不足,再按驱逐顺序终止 Pod。硬驱逐不会为被选中的 Pod 保留正常的终止宽限时间。

evictionSoft 则要求资源信号持续满足阈值达到指定时间后,才具备软驱逐条件。短暂的内存尖峰或磁盘波动如果在宽限时间内恢复,就不会仅因这次软阈值命中而触发驱逐。

因此可以把两条路径理解为:硬阈值命中后立即进入回收路径;软阈值命中后开始计时,只有持续时间达到对应的 evictionSoftGracePeriod 才继续处理。如果资源在计时期间恢复,本次软阈值计时不会形成驱逐条件。

软硬驱逐阈值、软驱逐宽限与压力状态转换的时间关系

配置一组可读的阈值

推荐通过 kubelet 配置文件管理这些参数。下面是 KubeletConfiguration 的片段示例,具体阈值应结合节点容量、系统预留和业务负载确定。

yaml
apiVersion: kubelet.config.k8s.io/v1beta1
kind: KubeletConfiguration
evictionHard:
  memory.available: "500Mi"
  nodefs.available: "8%"
evictionSoft:
  memory.available: "1Gi"
  nodefs.available: "12%"
evictionSoftGracePeriod:
  memory.available: "1m30s"
  nodefs.available: "2m"
evictionMaxPodGracePeriod: 30
evictionPressureTransitionPeriod: "5m"

预期结果

text
memory.available:低于 1Gi 持续 1m30s 后满足软阈值持续时间要求;低于 500Mi 时进入硬阈值处理路径。
nodefs.available:低于 12% 持续 2m 后满足软阈值持续时间要求;低于 8% 时进入硬阈值处理路径。
软驱逐决定发生后,被选中 Pod 的终止宽限最多为 30 秒。

这里的 memory.available 与 nodefs.available 都是完整的资源信号名称,不能写成 mavailable 等损坏字段。还要注意,自定义 evictionHard 时应核对当前 kubelet 版本及 MergeDefaultEvictionSettings 的实际行为;如果未启用默认阈值合并能力,不要假定只写一个硬阈值后其余默认值仍会自动保留。

分清两种宽限时间

evictionSoftGracePeriod 回答的是“资源压力需要持续多久,才算满足软驱逐条件”。例如 memory.available 连续低于软阈值 90 秒,才会通过这层持续时间判断。

evictionMaxPodGracePeriod 回答的是“软驱逐已经决定发生后,被选中 Pod 最多还能获得多少终止宽限时间”。它不是软阈值的等待时间。对于硬阈值触发的驱逐,kubelet 不使用这个软驱逐最大宽限值来延迟终止。

因此,这两个参数必须分别设计:前者决定是否值得因持续压力进入软驱逐,后者决定驱逐发生后最多给业务多少收尾时间,不能把它们理解为同一个计时器。

压力状态转换还有一层防抖

资源信号可能在阈值附近反复波动,导致 MemoryPressure、DiskPressure 等节点 Condition 频繁变化。evictionPressureTransitionPeriod 用于抑制这种状态抖动,尤其是在压力信号恢复后,避免节点过快从压力状态切回正常状态。

它与 evictionSoftGracePeriod 的职责不同:前者作用于节点压力 Condition 的状态转换,后者作用于软阈值必须持续多久才满足驱逐条件。即使把压力状态转换周期配置得很长,也不能替代软阈值自己的 grace period。

观察节点压力状态

配置应用到 kubelet 并重启相应服务后,可以从 Kubernetes API 观察节点报告的压力 Condition。将 <NODE> 替换为实际节点名执行:

bash
kubectl get node <NODE> -o custom-columns='NAME:.metadata.name,MEMORY:.status.conditions[?(@.type=="MemoryPressure")].status,DISK:.status.conditions[?(@.type=="DiskPressure")].status,PID:.status.conditions[?(@.type=="PIDPressure")].status'

预期输出

text
NAME     MEMORY    DISK      PID
<NODE>   <VALUE>   <VALUE>   <VALUE>

实际值通常为 True、False 或 Unknown,并会随节点状态变化。这个命令验证的是 kubelet 已经向 API Server 报告的压力 Condition,而不是直接读取驱逐阈值配置;若要确认参数是否真正加载,还应检查该节点实际使用的 kubelet 配置和启动状态。

设计驱逐策略时,可以把三类参数分开理解:软阈值负责过滤短暂资源波动,硬阈值负责守住节点最后的安全边界,压力转换周期负责抑制节点 Condition 抖动。职责分开后,才能减少不必要的 Pod 驱逐,同时保留节点对真实资源危机的及时响应。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

理解软硬驱逐阈值

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通