Selenium不能与修改以避免检测的chromedriver一起工作

Question

我问这个问题是因为我知道这个线程和这个线程，还有关于同一主题的其他线程，但是每个人在第一个线程中转发的解决方案都不再起作用了。因此，请不要将此标记为关闭，因为第一个线程存在。答案来自2016年，你可以看到更多最近的评论有麻烦。

我在用硒做一些轻微的网刮。我正在与之交互的一个站点显然检测到我的浏览器是自动的（但奇怪的是，只要我也访问了我所在区域之外的站点的版本，我就只关心它，但这并不在这里也不在那里）。

第一个线程中的解决方案建议采取从这里下载的chromedriver并对其进行修改。它说要去掉“$cdc$”中的变量。所以我做了以下操作。从那个站点下载V2.41，解压它。这个版本允许我通过br=webdriver.Chrome('./chromedriver')与Selenium一起使用Chrome，但是有自动化检测问题。所以，我cp这使Chromedriver被修改了。

在chromedriver-modified中，我用vim打开它并搜索$cdc。我发现了一个与1934行左右的链接线程中的函数相似（但略有不同）的函数：

function getPageCache(opt_doc, opt_w3c) {
  var doc = opt_doc || document;
  var w3c = opt_w3c || false;
  // var key = '$cdc_asdjflasutopfhvcZLmcfl_';
  var key = 'xxxx_asdjflasutopfhvcZLmcfl_';
  // var key = 'randomblahhh_';
  if (w3c) {
    if (!(key in doc))
      doc[key] = new CacheWithUUID();
    return doc[key];
  } else {
    if (!(key in doc))
      doc[key] = new Cache();
    return doc[key];
  }
}

我试着用随机变量(randomblahhh_var)和替换$cdc变量的前4个字符的变量来替换这个变量，因为我在那个线程的注释中看到了这两个变量的建议（我不知道变量的某种格式在这里是否重要）。

两个都不起作用。我的意思是，当我尝试用chromedriver-modified运行它时，webdriver甚至不会启动：

>>> from selenium import webdriver
>>> br = webdriver.Chrome(executable_path='./chromedriver-modified')
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/usr/lib/python3/dist-packages/selenium/webdriver/chrome/webdriver.py", line 68, in __init__
    self.service.start()
  File "/usr/lib/python3/dist-packages/selenium/webdriver/common/service.py", line 96, in start
    self.assert_process_still_running()
  File "/usr/lib/python3/dist-packages/selenium/webdriver/common/service.py", line 109, in assert_process_still_running
    % (self.path, return_code)
selenium.common.exceptions.WebDriverException: Message: Service ./chromedriver-modified unexpectedly exited. Status code was: -11

我在谷歌搜索和弄清楚这个状态码的意思时遇到了麻烦。事实上，我发现了这个没有回答的reddit线程，也有同样的问题。

第一个线程也提到了$wdc变量，但我发现ChromeDriver中没有提到它们。

我也想抢先一步：我几乎百分之百相信，它检测到我使用的是自动浏览器，因为它是自动的，而不是因为鼠标点击速度之类的东西。如果我用selenium启动浏览器，但然后手动执行其余的操作，仍然会导致问题。

编辑：我正在使用来自Ubuntu repos的Chrome v68,Google-Chrome-Stable。老实说，我不需要特别使用Chrome，但我找到的答案似乎围绕着它而不是火狐。

编辑2：最后一个评论--我在第一个链接的线程中注意到有些人正在“重新编译”：

对我来说，我使用的是chrome，所以，我所要做的就是确保$cdc_不再作为文档变量存在，然后（下载chromedriver源代码，修改chromedriver并以不同的名称重新编译$cdc_)

Answer 1

没有必要再次重新编译它，除非您想构造具有某些特性的单独chrome。尝试将“$CDC_ASDJFLASUTOPFHVCZLMCFL_”更改为“$ABC_ASDJFLASUTOPFHVCZLMCFL_”。切记不要注意这一行，或者把它改成其他长度不同的变量名。由于编译后的文件对此比较敏感，可能会导致运行错误。