当前位置: 首页 > 面试题库 >

Selenium和Heroku:urllib3.exceptions.ProtocolError:('连接异常终止。',ConnectionResetError(104,'对等重置连接'))

慕容聪
2023-03-14
问题内容

建立:

  • selenium :3.141.0
  • 的Python :3.6.7
  • heroku-stack :heroku-18
  • headless-chrome :安装了v71.0.3578.80 buildpack
  • chromedriver :已安装v2.44.609551 buildpack

在heroku中使用selenium时出现此错误:

urllib3.exceptions.ProtocolError: ('Connection aborted.', ConnectionResetError(104, 'Connection reset by peer'))

我用谷歌搜索,但是没有运气。错误发生在此代码的最后一行。

from selenium import webdriver
from selenium.common.exceptions import TimeoutException
from selenium.webdriver.support.wait import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By

UA = 'Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36' \
     '(KHTML, like Gecko) Chrome/39.0.2171.95 Safari/537.36'
DRIVER_PATH = '/app/.chromedriver/bin/chromedriver'

chrome_options = webdriver.ChromeOptions()
chrome_options.binary_location = '/app/.apt/usr/bin/google-chrome'
chrome_options.add_argument(f'--user-agent={UA}')
chrome_options.add_argument(f'--proxy-server=http://my_private_proxy.com:my_port')
chrome_options.add_argument('--disable-gpu')
chrome_options.add_argument('--no-sandbox')

chrome = webdriver.Chrome(executable_path=DRIVER_PATH, options=options)

问题答案:

此错误消息…

urllib3.exceptions.ProtocolError: ('Connection aborted.', ConnectionResetError(104, 'Connection reset by peer'))

......意味着 ChromeDriver无头 模式下无法启动/生成一个新的 web浏览器Chrome的浏览器
会话。

有关您使用的二进制文件版本的某些信息将有助于我们以更好的方式分析错误。但是,由于以下几个原因,可以 消除urllib3的 问题:

  • 当您使用 非Windows 操作系统时, --disable-gpu 不需要像在无头讨论中那样指定参数:使得–disable-gpu标志不必要的 skyos … @ chromium.org提到:

在Linux或macOS上不再需要此标志。一旦SwiftShader在无头模式下的Windows上断言失败后,在Windows上将不再需要它

  • 您可以在丢失的用户界面共享上下文中找到详细的讨论:在无头模式下通过ChromeDriver初始化Chrome浏览器时

  • 此外,您可以添加参数 --disable-dev-shm-usage 来克服有限的资源问题:

    chrome_options.addArguments("--disable-dev-shm-usage"); // overcome limited resource problems
    
  • 您可以--disable-dev-shm-usage在讨论org.openqa.selenium.WebDriverException中找到详细讨论:未知错误:尝试启动Chrome浏览器时DevToolsActivePort文件不存在

  • 根据urllib3.exceptions.ProtocolError:(’Connection aborted。’,error(10054,’现有连接被远程主机强行关闭’)))当您所使用的二进制版本之间存在某些 不兼容 时,会观察到此问题使用。

  • 升级 ChromeDriver 当前 ChromeDriver v2.44 水平。
  • Chrome 版本保持在 Chrome v69-71 之间。(根据ChromeDriver v2.44发行说明)
  • 清理 你的 项目工作 ,通过你的 IDE重建 仅需要依赖你的项目。
  • 如果您的基本 Web客户端 版本太旧,则将其卸载并安装最新的GA和 Web客户端的 发行版本。
  • 进行 系统重启
  • 执行您的@Test


 类似资料:
  • 问题内容: 我正在尝试从下面的网址中抓取数据。但是selenium有时会出错,有时会失败。 在极少数情况下,它可以正常工作, 并且在使用实际浏览器的Mac上,同一蜘蛛每次都能正常工作。因此,这与我的无关。 尝试了许多解决方案,例如在页面上等待获取选择器,隐式等待,使用selenium-requests传递正确的请求标头等,但似乎没有任何效果。 我使用的,与实现这一目标。操作系统是。 注意: 我有许

  • 问题内容: 我正在开发一个从Web服务器下载数据的应用程序,一开始似乎没有任何问题,但是几天前我开始收到这种异常:javax.net.ssl.SSLException: Read error: ssl=0x7a6588: I/O error during system call, Connection reset by peer我不确定是什么原因引起的问题以及如何解决。这是整个LogCat消息:

  • 我正在编写Android应用程序,从一个网站下载特定的文件(目前为20M字节),以供测试之用。我使用URLConnection和BufferedInputStream。 下载了几兆字节后,我收到对等体重置的IOException连接。 InputStream.Read()暂停了大约130秒,然后引发异常。 经过几次尝试,我注意到下载的字节是11,272,192或11,010,048,知道文件可以从

  • 我这个程序采用的是netty,此程序中有客户端和服务端。 程序思路:服务端接受消息后在利用客户端发给别的服务端。 出现问题:时不时会出现这个异常,也不知道是那报的异常,经过查资料此异常是由某一端断开,发生的连接异常 ,我的客户端做了断开重连 但是并没发现重连的log ,难道是上游的客户端断开,那我的服务端也不应该报异常啊。不是很清楚? 有知道的吗?或者提供解决思路。 客户端重连代码 断开后进入重连

  • 当使用Python2.7和从API检索数据时,我得到了错误

  • 当我尝试将Tornado和pyzmq Ioops结合起来时,我遇到了一个恼人的问题(虽然不是关键问题),正如pyzmq官方文档中所描述的那样。 我有一个运行tornado(T)服务器的进程,它接受来自客户端(C)的RESTAPI请求,并通过ZMQ传输将它们代理到另一个执行实际工作的进程(Z)。 如果C在Z回复T之前关闭连接,Z(tornado)输出一长串异常跟踪(见底部)。想象一下下面的例子: 这