Kubernetes：无法访问部署的公开服务

Question

我在Google Container Engine上部署了一个容器，它运行良好。现在，我想公开它。

这个应用程序是一个侦听2个端口的服务。使用kubectl公开部署，我创建了2个负载均衡器，每个端口一个。

我制作了两个负载平衡器，因为kubectl expose命令似乎不允许使用多个端口。虽然我在kubectl上将其定义为type=LoadBalancer，但一旦在GKE上创建了它们，它们就被定义为与kubectl创建的2个目标池关联的转发规则。kubectl还自动为每个平衡器制定防火墙规则。

我制作的第一个公开了应用程序。我能够与应用程序进行通信并得到响应。

第二个根本没有连接。我不断收到连接被拒绝或连接超时的消息。为了解决这个问题，我进一步简化了防火墙规则，尽可能允许解决这个问题。由于允许ICMP，默认情况下，ping此平衡器的ip会导致回复。

kubernetes是否只允许一个负载平衡器工作，即使可以配置多个负载平衡器？如果有任何问题，则工作平衡器的外部ip为模式35。xxx。xxx。xxx和不工作的平衡器的ip为107。xxx。xxx。xxx。

作为一个附带的问题，是否有一种方法可以使用kubectl expose--port公开多个端口，而不需要定义范围，即我只需要2个端口？

最后，我尝试使用Google控制台，但我无法让负载平衡器或转发规则与html" target="_blank">kubernetes上的内容一起工作，就像在kubectl上那样。

下面是我使用的命令，在第二次使用时修改端口和服务名称：

kubectl expose deployment myapp --name=my-app-balancer --type=LoadBalancer --port 62697 --selector="app=my-app"

我的防火墙规则基本上设置为允许所有传入TCP连接通过0.0.0.0/0。

编辑：外部IP与此无关。我一直在删除

我还尝试删除工作的平衡器，并重新创建一个不工作的平衡器，以查看平衡器之间是否存在冲突。第二个平衡器仍然无法工作，即使它是唯一运行的平衡器。

我目前正在研究我的应用程序的第二个服务的代码，尽管它实际上与第一个服务相同，这是一个简单的ServerSocket实现，在定义的端口上侦听。

Answer 1

经过更彻底的调查（在运行的pod中打开控制台、安装tcpump、iptables等），我发现服务（即负载均衡器）实际上是可访问的。在这种情况下发生的事情是，尽管流量到达了容器的虚拟网络接口（eth0），但数据并没有路由到监听服务，即使这些是接口的ip别名（eth0:1、eth0:2）。

让它工作的最后一步是创建所需的路线

iptables -t nat -A PREROUTING -p tcp -i eth0 --dport <listener-ip> -j DNAT --to-destination <listener-ip>

请注意，还有其他方法可以实现这一点，但这是我选择的方法。我希望Docker/Kubernetes文档提到这一点。