Kubernetes AntiAffinity-限制每个节点的最大相同POD数

Question

我有一个kubernetes集群，有4个节点。我部署了一个pod作为部署，有8个副本。当我部署这个时，kubernetes有时会在node1中安排4个吊舱，其余的4个吊舱安排在node2中。在这种情况下，node3和node4没有运行此容器（但其他容器在那里运行）

我确实理解Pod亲和力和反亲和力，他们有Pod反亲和力的ZooWatch示例，这很好。这将确保没有2个pod会部署在同一个节点上。

这很好，但是我的要求略有不同，我想限制k8s可以部署到一个具有节点反亲和性的节点的最大POD数量。

在上面的示例中，我需要确保在一个节点上部署的同一POD实例不超过3个。我曾想过在POD上设置内存/cpu限制，但这似乎是个坏主意，因为我有不同配置的节点。有没有办法做到这一点？

（更新1）-我知道我的问题不够清楚。为了进一步澄清，我想将pod的实例限制为针对特定部署的每个节点最多3个。例如，我如何告诉k8s每个节点部署的nginx pod实例不超过3个？该限制应仅适用于nginx部署，而不适用于其他部署。

（更新2）-用场景进一步解释。一个k8s群集，具有4个工作节点。2部署

1. nginx部署-

需求-嘿，kubernetes，我想在4个节点中安排10个“自定义用户代理”吊舱（本例中为2个吊舱），但我想确保每个节点最多只能有3个“自定义用户代理”吊舱。对于“nginx”pod，不应该有任何这样的限制，这意味着我不介意k8s是否在一个节点中调度5个nginx，而在第二个节点中调度5个nginx的其余部分。

Answer 1

该功能是alpha的，我相信它被称为topologyKey，这取决于您的Kubernetes版本，您可能可以使用它。https://kubernetes.io/docs/concepts/scheduling-eviction/assign-pod-node/

Answer 2

因此，通过topologykey可以为每个节点设置最小数量的pod

是的，您可以通过将topologykey设置为“kubernetes.io/hostname”的pod关联，通过部署对象在每个节点上生成一个pod。

在上述示例中，您将具有以下行为：

Answer 3

我自己没有找到这个的官方留档。但是我认为你可以使用preferredDuringSchedulingIgnoredDuringExecution选项的podantiaffinity。这将阻止k8s在单个节点上放置相同的pod，但如果这是不可能的，它将选择最符合条件的现有节点。官方文档在这里

affinity:
    podAntiAffinity:
      preferredDuringSchedulingIgnoredDuringExecution:
      - podAffinityTerm:
          labelSelector:
            matchLabels:
              name: deployment-name
          topologyKey: kubernetes.io/hostname
        weight: 100