如何使用 Kubernetes 服务发现进行端口发现？

Question

我有一个HPC集群应用程序，我希望用Kubernetes和一些中间件(最有可能是ZMQ或RabbitMQ)的组合来替换MPI和我们的内部集群管理软件。

我正在尝试设计如何使用Kubernetes的服务发现在这个系统上进行对等体发现。

我知道Kubernetes可以为给定的服务提供DNS名称，这很好，但有没有一种方法也可以动态发现端口？

例如，假设我用ZeroMQ替换了MPI中间件，我需要一种方法让等级(集群上的进程)找到彼此。我知道我可以简单地让ranks向Kubernetes发现机制发出服务创建消息，并很容易地获得一个像myapp_mypid_rank_42这样的主机名，但是我如何处理端口呢？

如果可能的话，如果我能做到以下几点就太好了:

zmqSocket.connect("tcp://myapp_mypid_rank_42");

但我认为这行不通，因为我没有来自 DNS 的端口号信息。

我如何让Kubernetes服务发现也以尽可能简单的方式提供一个端口，以允许集群中的成员相互发现？

注意：注册过程知道其端口，并且可以将其注册到 K8s 服务发现守护程序。问题是一种快速简便的方法，可以为需要它的进程获取该端口号。我要问的问题是是否有一种像 DNS 主机名一样简单的机制，或者我是否需要从 k8s 守护程序显式查询主机名和端口号，而不是简单地根据一些商定的规则构建主机名（例如从myapp_mypid_myrank构建字符串）？

Answer 1

我认为在最常见的情况下，您应该知道访问服务的端口号。

但如果有用，Kubernetes 会为每个 Pod 添加一些环境变量，以简化所有服务的自动发现。例如 {SVCNAME}_SERVICE_HOST 和 {SVCNAME}_SERVICE_PORT。文档在这里

Answer 2

事实证明，最好的方法是使用DNS SRV记录:

https://kubernetes.io/docs/concepts/services-networking/service/#discovering-serviceshttps://en.wikipedia.org/wiki/SRV_record

DNS SRV 记录为给定请求提供主机名/IP 和端口。

幸运的是，Kubernetes 服务发现支持 SRV 记录，并在集群的 DNS 上提供它们。