Selenium/Firefox可以连接到的白名单域

Question

我在firefox中使用SeleniumWebDriver。我想知道是否有一个设置，我可以改变，使它只要求从某些领域的资源。（特别是我希望它只请求与网页本身位于同一域的内容）。

用Python编写的当前设置是：

 from selenium import webdriver
 firefox_profile = webdriver.FirefoxProfile()
 ## Here, I change various default setting in Firefox, and install a couple of monitoring extensions
 driver = webdriver.Firefox(firefox_profile)
 driver.get(web_address)

我想做的是，如果我指定的网络地址wwww.domain.com，然后只加载domain.com提供的内容，而不是例如所有由其他域托管的跟踪内容通常会被请求。希望可以通过修改火狐中的配置文件设置或扩展来实现。

注意-有一个类似的问题（没有答案）-将Selenium/Webdriver/HtmlUnit限制在某个特定的领域-但它已经有四年的历史了，我认为Selenium从那时起已经进化了很多。

Answer 1

我认为这在硒中仍然是不可能的。但您仍然可以通过使用browsermob等代理来实现这一点。Webdriver与browsermob代理集成良好。

java中的伪代码示例

    //LittleProxy-powered 2.1.0 release

    LegacyProxyServer server = new BrowserMobProxyServer();

    server.start(0);

    // Blacklist websites
    server.blacklistRequests("https?://.*\\.blocksite\\.com/.*", 410);//these sites will be blocked

    /// get the Selenium proxy object
    Proxy proxy = ClientUtil.createSeleniumProxy(server);

    // configure it as a desired capability
    DesiredCapabilities capabilities = new DesiredCapabilities();

    capabilities.setCapability(CapabilityType.PROXY, proxy);

    // initialize the driver with the capabilities   ;
    Webdriver driver = new FirefoxDriver(capabilities);

希望这对你有帮助。如果你需要进一步的帮助请回来

Answer 2

多亏了Vicky（我遵循了Vicky使用代理设置的方法——尽管是直接从Selenium获得的），下面的代码将更改firefox中的代理设置，使其不会连接到除白名单上的域之外的域。

我怀疑一些设置更改是不必要的，在大多数情况下可以忽略。用Python编写代码。

    from selenium import webdriver
    firefox_profile = webdriver.FirefoxProfile()

    ## replace desired_domain.com below with whitelisted domain. Separate domains by comma.
    firefox_profile.set_preference("network.proxy.no_proxies_on","localhost,127.0.0.1,desired_domain.com")      

    firefox_profile.set_preference("network.proxy.backup.ftp","0.0.0.0")
    firefox_profile.set_preference("network.proxy.backup.ftp_port",1)
    firefox_profile.set_preference("network.proxy.backup.socks","0.0.0.0")
    firefox_profile.set_preference("network.proxy.backup.socks_port",1)
    firefox_profile.set_preference("network.proxy.backup.ssl","0.0.0.0")
    firefox_profile.set_preference("network.proxy.backup.ssl_port",1)
    firefox_profile.set_preference("network.proxy.ftp","0.0.0.0")
    firefox_profile.set_preference("network.proxy.ftp_port",1)
    firefox_profile.set_preference("network.proxy.http","0.0.0.0")
    firefox_profile.set_preference("network.proxy.http_port",1)
    firefox_profile.set_preference("network.proxy.socks","0.0.0.0")
    firefox_profile.set_preference("network.proxy.socks_port",1)
    firefox_profile.set_preference("network.proxy.ssl","0.0.0.0")
    firefox_profile.set_preference("network.proxy.ssl_port",1)
    firefox_profile.set_preference("network.proxy.type",1)
    firefox_profile.set_preference("network.proxy.share_proxy_settings",True)       

    driver = webdriver.Firefox(firefox_profile)
    driver.get(web_address_desired)