Selenium WebDriver：修改Navigator.WebDriver标志以防止Selenium检测

Question

Object.defineProperty(navigator, 'webdriver', {
    get: () => false,
  });

但它只在初始页加载后更新属性。我认为站点在我的脚本执行之前检测到了变量。

Answer 1

execute_cdp_cmd():有了execute_cdp_cmd(cmd,cmd_args)命令，您现在可以使用Selenium轻松执行google-chrome-devtools命令。使用此功能，您可以很容易地修改navigator.webdriver以防止检测到硒。

为了防止Selenium驱动的WebDriver被检测到，小生境方法将包括以下任何一个/所有提到的步骤：

>

添加参数--disable-blink-features=automationcontrolled

from selenium import webdriver

options = webdriver.ChromeOptions() 
options.add_argument('--disable-blink-features=AutomationControlled')
driver = webdriver.Chrome(options=options, executable_path=r'C:\WebDrivers\chromedriver.exe')
driver.get("https://www.website.com")

>

通过execute_cdp_cmd()命令旋转用户代理，如下所示：

#Setting up Chrome/83.0.4103.53 as useragent
driver.execute_cdp_cmd('Network.setUserAgentOverride', {"userAgent": 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.53 Safari/537.36'})

将webdriver的导航器的属性值更改为undefined

driver.execute_script("Object.defineProperty(navigator, 'webdriver', {get: () => undefined})")

排除enable-automation交换机的集合

options.add_experimental_option("excludeSwitches", ["enable-automation"])

options.add_experimental_option('useAutomationExtension', False)

将上面提到的所有步骤和有效的代码块组合起来将是：

from selenium import webdriver

options = webdriver.ChromeOptions() 
options.add_argument("start-maximized")
options.add_experimental_option("excludeSwitches", ["enable-automation"])
options.add_experimental_option('useAutomationExtension', False)
driver = webdriver.Chrome(options=options, executable_path=r'C:\WebDrivers\chromedriver.exe')
driver.execute_script("Object.defineProperty(navigator, 'webdriver', {get: () => undefined})")
driver.execute_cdp_cmd('Network.setUserAgentOverride', {"userAgent": 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.53 Safari/537.36'})
print(driver.execute_script("return navigator.userAgent;"))
driver.get('https://www.httpbin.org/headers')

根据W3C编辑器的草案，当前的实现严格提到：

当用户代理处于远程控制（最初设置为false）时，WebDriver-active标志被设置为true。

Navigator includes NavigatorAutomationInformation;

不应在WorkerNavigator上公开NavigatorAutomationInformation接口。

NavigatorAutomationInformation接口定义为：

interface mixin NavigatorAutomationInformation {
    readonly attribute boolean webdriver;
};

如果设置了webdriver-active标志，则返回true，否则返回false。

在当前的实现中，访问网页而不被检测到的理想方法是使用ChromeOptions()类为以下内容添加几个参数：

• 排除Enable-Automation交换机的集合
• 关闭UseAutomationExtension

通过ChromeOptions的实例，如下所示：

System.setProperty("webdriver.chrome.driver", "C:\\Utility\\BrowserDrivers\\chromedriver.exe");
ChromeOptions options = new ChromeOptions();
options.setExperimentalOption("excludeSwitches", Collections.singletonList("enable-automation"));
options.setExperimentalOption("useAutomationExtension", false);
WebDriver driver =  new ChromeDriver(options);
driver.get("https://www.google.com/");

Python示例

from selenium import webdriver

options = webdriver.ChromeOptions()
options.add_experimental_option("excludeSwitches", ["enable-automation"])
options.add_experimental_option('useAutomationExtension', False)
driver = webdriver.Chrome(options=options, executable_path=r'C:\path\to\chromedriver.exe')
driver.get("https://www.google.com/")

¹:仅适用于Selenium的Python客户端。

²:仅适用于Selenium的Python客户端。