gke nginx ingress创建额外的负载平衡器

Question

有一个入口配置，比如

apiVersion: extensions/v1beta1
kind: Ingress
metadata:
  name: api-https
  annotations:
    nginx.ingress.kubernetes.io/ssl-redirect: true
    nginx.ingress.kubernetes.io/force-ssl-redirect: true
    nginx.org/ssl-services: "api,spa"
    kubernetes.io/ingress.class: nginx
spec:
  tls:
    - hosts:
        - api.some.com
        - www.some.com
      secretName: secret
  rules:
    - host: api.some.com
      http:
        paths:
          - path: /
            backend:
              serviceName: api
              servicePort: 8080
    - host: www.some.com
      http:
        paths:
          - path: /
            backend:
              serviceName: spa
              servicePort: 8081

gke创建了nginx ingress负载平衡器，但也创建了另一个具有后端的负载平衡器，就像如果没有选择nginx，而是选择gcp作为ingress一样。

下面的屏幕截图以红色显示了两个意外的LB，蓝色显示了两个nginx ingress LB，分别用于我们的qa和prod env。

kubectl的输出获取服务

xyz@cloudshell:~ (xyz)$ kubectl get services
NAME                            TYPE           CLUSTER-IP      EXTERNAL-IP      PORT(S)                         AGE
api                             NodePort       1.2.3.4         <none>           8080:32332/TCP,4433:31866/TCP   10d
nginx-ingress-controller        LoadBalancer   1.2.6.9         12.13.14.15      80:32321/TCP,443:32514/TCP      2d
nginx-ingress-default-backend   ClusterIP      1.2.7.10        <none>           80/TCP                          2d
spa                             NodePort       1.2.8.11        <none>           8082:31847/TCP,4435:31116/TCP   6d

gcp gke服务视图中错误信息入口的屏幕截图

这是意料之中的吗？

我是否错过了阻止创建此额外负载平衡器的任何配置？

Answer 1

在GKE集群上创建部署时，有两种可能公开它：

1. 将服务与LoadBalancer类型一起使用并公开-这将创建TCP负载平衡器
2. 将服务创建为节点端口或群集IP，并将其公开为入口-这将创建HTTP负载平衡器

如果您可以在负载均衡器中看到它们，这意味着您可能已经创建了服务类型LoadBalancer，然后将其公开为入口。您正在打开相同的部署以从两个不同的IP（按服务和入口）访问。要确认此尝试：

$ kubectl get ingress
$ kubectl get svc

您将从这2个命令中获得2个ips，它们都将向您显示相同的页面。

配置它的更好方法是拥有服务类型NodePort，并将该服务公开为入口。这特别有用，因为您可以使用相同的入口来公开更多服务。

这样可以节省暴露的IP数量（并且不使用多个负载平衡器可以节省资金）。

Answer 2

在GCP GKE上，gcp入口控制器默认启用，并且在任何入口定义中始终会导致一个新的LB，即使指定了. class。

https://github.com/kubernetes/ingress-nginx/issues/3703

因此，要修复它，我们应该从集群中删除gcp入口控制器，如https://github.com/kubernetes/ingress-gce/blob/master/docs/faq/gce.md#how-do-i-disable-the-gce-ingress-controller