在Twisted中将HTTP代理转换为HTTPS代理

Question

最近，我一直在扭曲使用HTTP代理。经过反复试验，我想我终于可以正常工作了。我想知道的是，如果可能的话，如何扩展此代理以使其也能够处理HTTPS页面？到目前为止，这是我得到的：

from twisted.internet import reactor
from twisted.web import http
from twisted.web.proxy import Proxy, ProxyRequest, ProxyClientFactory, ProxyClient



class HTTPProxyClient(ProxyClient):
    def handleHeader(self, key, value):
        print "%s : %s" % (key, value)
        ProxyClient.handleHeader(self, key, value)

    def handleResponsePart(self, buffer):
        print buffer
        ProxyClient.handleResponsePart(self, buffer)

class HTTPProxyFactory(ProxyClientFactory):
    protocol = HTTPProxyClient

class HTTPProxyRequest(ProxyRequest):
    protocols = {'http' : HTTPProxyFactory}

    def process(self):
        print self.method
        for k,v in self.requestHeaders.getAllRawHeaders():
            print "%s : %s" % (k,v)
        print "\n \n"

        ProxyRequest.process(self)

class HTTPProxy(Proxy):

    requestFactory = HTTPProxyRequest


factory = http.HTTPFactory()
factory.protocol = HTTPProxy

reactor.listenSSL(8001, factory)
reactor.run()

如该代码所示，为了示例，我现在仅打印通过连接进行的操作。是否可以使用相同的类来处理HTTPS？如果没有，我应该如何实施这样的事情？

Answer 1

如果要通过HTTP代理连接到HTTPS网站，则需要使用CONNECTHTTP动词（因为这是HTTPS代理的工作方式）。在这种情况下，代理服务器仅连接到目标服务器，并将服务器发送的所有内容中继回客户端的套接字（反之亦然）。在这种情况下，不涉及缓存（但您可能能够记录要连接的主机）。

交换看起来像这样（客户端代理）：

C->P: CONNECT target.host:443 HTTP/1.0
C->P:

P->C: 200 OK
P->C:

此后，代理仅打开一个到目标服务器的普通套接字（尚无HTTP或SSL /
TLS），并在初始客户端和目标服务器之间中继所有内容（包括客户端发起的TLS握手）。客户端将其具有的现有套接字升级到代理以使用TLS /
SSL（通过启动SSL / TLS握手）。就客户端而言，一旦客户端读取了“ 200”状态行，就好像它已直接建立到目标服务器的连接一样。