通过Istio入口网关的TLS握手失败（tlsMode=passthrough）

Question

从外部客户端到库伯内特斯集群内的服务器的TLS握手失败。这是关于理解为什么。

我已经配置了一个Istio入口网关，以通过端口15433上接收的TLS，并将其路由到端口433上的服务器。

当客户端尝试TLS握手时，入口网关日志显示活动，但不显示服务器日志，也不显示istio代理日志。

TLS客户端：

openssl s_client \ 
        -connect [redacted]-[redacted].us-west-2.elb.amazonaws.com:15443 \ 
        -servername myservice.mynamespace \ 
        -CAfile /path/to/ca.cert \ 
        -cert /path/to/cert.pem \ 
        -key /path/to/cert.key <<< "Q"

日志

CONNECTED(00000006) 
140090868934296:error:140790E5:SSL routines:ssl23_write:ssl handshake failure:s23_lib.c:177: 
--- 
no peer certificate available 
--- 
No client certificate CA names sent 
--- 
SSL handshake has read 0 bytes and written 298 bytes 
--- 
New, (NONE), Cipher is (NONE) 
Secure Renegotiation IS NOT supported 
Compression: NONE 
Expansion: NONE 
No ALPN negotiated 
SSL-Session: 
    Protocol  : TLSv1.2 
    Cipher    : 0000 
    Session-ID:  
    Session-ID-ctx:  
    Master-Key:  
    Key-Arg   : None 
    PSK identity: None 
    PSK identity hint: None 
    SRP username: None 
    Start Time: 1600987862 
    Timeout   : 300 (sec) 
    Verify return code: 0 (ok) 

Istio入口网关日志：

"- - -" 0 - "-" "-" 298 0 1069 - "-" "-" "-" "-" "192.168.101.136:443" outbound|443||myservice.mynamespace.svc.cluster.local 192.168.115.141:42350 192.168.115.141:15443 192.168.125.206:23298 myservice.mynamespace - 

其中192.168.101.136是myservice pod的IP，192.168.115.141是ingressgateway pod的IP。

基于IP，这意味着客户端连接到达了网关，网关似乎已经应用了virtualservice路由，并记录了它正在将其转发到pod。看起来很正常，除了pod上的istio代理没有显示任何活动，也没有服务器日志（尽管服务器没有记录传输层发生的事情）。

AFAIK当以下端口转发TLS握手成功时，服务器已正确配置TLS：

kubectl port-forward -n mynamespace service/myservice 4430:443 &
openssl s_client \
        -connect localhost:4430 \
        -CAfile /path/to/ca.cert \ 
        -cert /path/to/cert.pem \ 
        -key /path/to/cert.key <<< "Q"
# I get back a TLS session ID, looks good.

因此，这表明istio的网关或virtualservice配置存在问题。

盖特韦：

apiVersion: networking.istio.io/v1alpha3
kind: Gateway
metadata:
  name: mygateway
  namespace: mynamespace
spec:
  selector:
    istio: ingressgateway
  servers:
    - port:
        number: 15443
        name: tls-passthrough
        protocol: TLS
      tls:
        mode: PASSTHROUGH
      hosts:
      - "*"

虚拟服务：

apiVersion: networking.istio.io/v1alpha3
kind: VirtualService
metadata:
  name: myservice
  namespace: mynamespace
spec:
  hosts:
  - "*" 
  gateways:
  - mygateway
  tls:
    - match:
      - port: 15443
        sniHosts:
        - myservice.mynamespace
      route:
      - destination:
          host: myservice
          port:
            number: 443

库伯内特斯服务：

apiVersion: v1
kind: Service
metadata:
  name: myservice
  namespace: mynamespace
  labels:
    app: myservice
spec:
  selector:
    app: myservice
  ports:
    - protocol: TCP
      port: 443
      targetPort: 443
      name: grpc-svc

更新：实际上，来自客户端的TLS流量确实到达了服务器端，我通过在服务器端执行tcpdump port 443并在运行openssl s_client命令时查看数据包来确认这一点。不清楚为什么pod上的istio代理没有显示这一点，这也不能解释握手失败的原因。

我注意到别的东西。传递-msg标志到openssls_client，我看到没有返回，之后"

Answer 1

我的配置中有2个错误：

>

在我的库伯内特斯服务配置中。不幸的是，我的TCP端口443的名称是grpc-svc，这打破了TLS直通。将此端口重命名为tcp-svc可解决此问题。

我不应该使用入口端口15443，这似乎是为其他事情保留的。在ingress网关上打开另一个端口9444，然后在网关上配置端口9444，就像我在问题中配置端口15443一样（即配置TLS直通），然后将虚拟服务配置为路由9444，就像我配置虚拟服务路由一样15433在我的问题。

这两种操作都允许来自外部客户端的openssl s_client通过入口成功地与kubernetes服务进行TLS握手。