容器与云原生 / 系统课时

配置节点亲和性

配置节点亲和性

节点亲和性用于把 Pod 的节点选择条件写成可组合的表达式:requiredDuringSchedulingIgnoredDuringExecution 负责硬性筛选,preferredDuringSchedulingIgnoredDuringExecution 负责在可行节点中增加偏好。本课用一个可直接应用的 Deployment 完成“必须在 SSD 节点、优先放到指定区域”的策略并验证落点。

学习目标

  • 能区分 required 与 preferred 节点亲和性的约束强度
  • 能使用 matchExpressions 表达多条件节点筛选
  • 能通过节点标签与 Pod 落点验证亲和规则是否生效

节点亲和性的两层决策

节点亲和性写在 spec.affinity.nodeAffinity 下。调度器先处理 required 规则,只有满足硬性条件的节点才能进入候选集合;随后再根据 preferred 规则给候选节点加分,分数更高的节点更可能被选择。

requiredDuringSchedulingIgnoredDuringExecution 中,多个 nodeSelectorTerms 之间是“或”关系;同一个 term 内多个 matchExpressions 之间是“与”关系。因此可以表达“满足 A 且 B,或者满足 C”这类比 nodeSelector 更灵活的条件。

preferredDuringSchedulingIgnoredDuringExecution 不会直接淘汰节点。每条偏好规则都有 weight,范围是 1~100;节点匹配某条规则时会获得相应权重,之后再与调度器其他评分插件的结果共同参与最终选择。因此,权重表示偏好强弱,并不等于被选中的绝对概率。

required 与 preferred 节点亲和性的调度关系

配置硬约束与软偏好

先给测试节点添加标签。下面假设集群中存在 worker-a 与 worker-b 两个节点;如果实际节点名不同,请替换为真实名称。两个节点都满足 disk=ssd,但只有 worker-a 位于 preferred 指定的 us-west-1a 区域。

bash
kubectl label node worker-a disk=ssd topology.kubernetes.io/zone=us-west-1a --overwrite >/dev/null
kubectl label node worker-b disk=ssd topology.kubernetes.io/zone=us-west-1b --overwrite >/dev/null
kubectl get nodes -L disk,topology.kubernetes.io/zone

预期输出

text
NAME       STATUS   ROLES    AGE      VERSION   DISK   ZONE
worker-a   Ready    <none>   <TIME>   <VALUE>   ssd    us-west-1a
worker-b   Ready    <none>   <TIME>   <VALUE>   ssd    us-west-1b

实际 AGE、VERSION 等值会因集群而异。接着创建 Deployment:Pod 必须运行在 disk=ssd 的节点,并优先选择 us-west-1a 区域。

yaml
apiVersion: apps/v1
kind: Deployment
metadata:
  name: affinity-demo
spec:
  replicas: 1
  selector:
    matchLabels:
      app: affinity-demo
  template:
    metadata:
      labels:
        app: affinity-demo
    spec:
      affinity:
        nodeAffinity:
          # 硬约束:不满足 disk=ssd 的节点直接排除
          requiredDuringSchedulingIgnoredDuringExecution:
            nodeSelectorTerms:
              - matchExpressions:
                  - key: disk
                    operator: In
                    values:
                      - ssd
          # 软偏好:候选节点中优先选择 us-west-1a
          preferredDuringSchedulingIgnoredDuringExecution:
            - weight: 80
              preference:
                matchExpressions:
                  - key: topology.kubernetes.io/zone
                    operator: In
                    values:
                      - us-west-1a
      containers:
        - name: web
          image: nginx:1.27

这是完整配置文件,可保存为 <PATH>/affinity-demo.yaml。配置生效后可通过 Pod 的 NODE 字段验证实际落点。

bash
kubectl apply -f <PATH>/affinity-demo.yaml
kubectl get pods -l app=affinity-demo -o wide

预期结果

text
deployment.apps/affinity-demo created
NAME                             READY   STATUS    RESTARTS   AGE      IP     NODE
affinity-demo-<ID>               1/1     Running   0          <TIME>   <IP>   worker-a

首次应用通常显示 created,重复应用时可能显示 configured 或 unchanged。在示例标签与其他调度条件不冲突时,worker-a 同时满足 required 和 preferred,因此通常会被优先选择;若资源、污点、拓扑分布等其他调度因素介入,最终节点仍可能不同。

理解匹配运算符和调度失败

节点亲和性的 matchExpressions 常用运算符包括 In、NotIn、Exists、DoesNotExist、Gt 和 Lt。In 与 NotIn 使用 values 指定候选值;Exists 与 DoesNotExist 不应设置 values;Gt 和 Lt 要求 values 中提供一个可解析为整数的字符串,用于和节点标签值进行整数比较。

如果没有任何节点满足 required 条件,Pod 会保持 Pending。遇到这种情况应先查看调度事件,而不是调整 preferred 的权重。下面的命令适用于已经因节点亲和性无法调度的 Pod:

bash
kubectl describe pod -l app=affinity-demo

预期结果

text
Events:
  Type     Reason            Age      From               Message
  Warning  FailedScheduling <TIME>   default-scheduler  0/<VALUE> nodes are available: <VALUE> node(s) didn't match Pod's node affinity/selector.

节点数量和事件措辞可能随集群状态与 Kubernetes 版本变化,但关键证据是 FailedScheduling 以及 node affinity 或 selector 不匹配。

选择 required 还是 preferred

把真正不能违反的基础设施条件放进 required,例如必须使用特定磁盘类型、CPU 架构或合规节点池;把“最好如此但允许退化”的条件放进 preferred,例如优先某可用区或高性能节点池。

如果把大量偏好都写成 required,可调度节点会迅速减少,容易让 Pod 长时间处于 Pending。更稳妥的做法是让 required 只保留最小必要约束,再用 preferred 表达性能、成本或位置倾向,这样既能控制放置范围,也能给调度器保留选择空间。

按自己的节奏,确认真正理解。

目录与阅读设置

阅读设置

17

记录一个想法

配置节点亲和性

0 / 10000 · 笔记保存到账号。未提交的修改会在关闭、离开或刷新后丢失。

登录哪都通