（Web）套接字连接发送头而不是字符串

Question

我正在研究一个刮刀，它通过Chrome延伸部分工作。它抓取页面上的所有超文本标记语言，并将其发送到过滤和保存数据的python代码。我这样做刮擦的原因是因为网站有蒸馏网络和一个“传统”刮刀被阻止。

我成功地连接了这两个代码，但每当我尝试向python服务器发送“Test”时，它只输出浏览器的标题。

b'GET/HTTP/1.1主机：localhost:18364连接：升级Pragma:no-cache-cache-Control:no-cache-User-Agent:Mozilla/5.0（Windows NT 10.0；Win64；x64）AppleWebKit/537.36（KHTML，类似Gecko）Chrome/78.0.3904.108 Safari/537.36升级：websocket来源：Chrome-extension://ocplnbpkkcpcomkjioockgnlohhkdeic Sec WebSocket版本：13接受编码：gzip，deflate，br接受html" target="_blank">语言：nl nl，nl；q=0.9，在美国；q=0.8，en；q=0.7秒WebSocket密钥：SDC7zPgHK/eV QRSJy0DZQ==秒WebSocket扩展：permessage deflate；客户端\u最大\u窗口\u位'

JavaScript代码（客户端）：

chrome.runtime.onMessage.addListener(function(request, sender) {
if (request.action == "getSource") {
  var pageAmount = parseInt(request.source, 10)

  var allHTML = ""
  var BaseURL = "https://www.funda.nl/huur/rotterdam/p"

  function encode_utf8(s) {
    return unescape(encodeURIComponent(s));
  }

  var websocket = new WebSocket('ws://localhost:18364');

  websocket.onopen = function () {
    data = encode_utf8('Test.')
    websocket.send('Test.'); 
  };
message.innerText = request.source;
}
});

function onWindowLoad() {

var message = document.querySelector('#message');

chrome.tabs.executeScript(null, {
file: "getPageContent.js"
}, function() {
// If you try and inject into an extensions page or the         webstore/NTP you'll get an error
if (chrome.runtime.lastError) {
  message.innerText = 'There was an error injecting script : \n' + chrome.runtime.lastError.message;
}
});
}

window.onload = onWindowLoad;

Python代码（服务器）：

import socket

LocalSocket = socket.socket()
allHTML = ''

try:  # Connecting the Socket
LocalSocket = socket.socket(socket.AF_INET,     socket.SOCK_STREAM)
LocalSocket.setsockopt(socket.SOL_SOCKET,   socket.SO_REUSEADDR, 1)
LocalSocket.bind(('localhost', 18364))
print("Connected.")
except socket.error as err:
print("ConnectionError: %s" % err)


def main():
LocalSocket.listen(1)

c, addr = LocalSocket.accept()
print('Got connection from', addr)
print(c.recv(1024))

c.close()

if __name__ == "__main__":
main()

Answer 1

web套接字是在HTTP上分层的，因此这是预期的行为。您需要一个web服务器（或说HTTP的东西）来处理连接：升级和升级：websocket部分，然后在获得支持双向通信的有效连接之前执行其余握手

您可以看看如何使用websockets包，它很好地包装了这一点