如何设置代理身份验证（用户

Question

我使用Firefox WebDriver在Python 2.7与硒。我的python程序启动火狐浏览器，并在运行程序时访问不同的网站。但是，我需要设置具有身份验证的代理，以便当程序访问任何网站时，它将通过代理服务器访问。

关于SO也有一些类似的问题。但是，没有针对Python的Selenium Firefox WebDriver的特定解决方案。

• Python Selenium WebDrive-代理身份验证
• 在代理服务器后面运行selenium

Answer 1

您可以为代理编写自己的firefox扩展，并从selenium启动。你需要写2个文件并打包。

background.js

var proxy_host = "YOUR_PROXY_HOST";
var proxy_port = YOUR_PROXY_PORT;

var config = {
    mode: "fixed_servers",
    rules: {
      singleProxy: {
        scheme: "http",
        host: proxy_host,
        port: proxy_port
      },
      bypassList: []
    }
 };


function proxyRequest(request_data) {
    return {
        type: "http",
        host: proxy_host, 
        port: proxy_port
    };
}

browser.proxy.settings.set({value: config, scope: "regular"}, function() {;});

function callbackFn(details) {
return {
    authCredentials: {
        username: "YOUR_USERNAME",
        password: "YOUR_PASSWORD"
    }
};
}

browser.webRequest.onAuthRequired.addListener(
        callbackFn,
        {urls: ["<all_urls>"]},
        ['blocking']
);

browser.proxy.onRequest.addListener(proxyRequest, {urls: ["<all_urls>"]});

manifest.json

{
  "name": "My Firefox Proxy",
  "version": "1.0.0b",
  "manifest_version": 2,
  "permissions": [
    "browsingData",
    "proxy",
    "storage",
    "tabs",
    "webRequest",
    "webRequestBlocking",
    "downloads",
    "notifications",
    "<all_urls>"
  ],
  "background": {
    "scripts": ["background.js"]
  },
  "browser_specific_settings": {
    "gecko": {
      "id": "[e-mail]"
    }
  }
}

接下来，您需要将此文件打包到DEFLATED模式下的zip存档中，最后使用. xpi，如my_proxy_extension.xpi.

你有两个选择：

1. 签署您的扩展Firefox扩展。xpi文件结构：描述、内容、创建和安装

或

未签名运行。对于这个步骤：

>

或

在以下位置更新firefox配置文件：

Windows:C:\Program Files\Mozilla Firefox\Default\pref\channel prefs。js

Linux： /etc/firefox/syspref.js

将下一行添加到文件末尾：

 pref("xpinstall.signatures.required",false);

执行此步骤后，运行selenium并安装此扩展：

from selenium import webdriver

driver = webdriver.Firefox()
driver.install_addon("path/to/my_proxy_extension.xpi")

driver.get("https://yoursite.com")


 

Answer 2

除了使用保存了凭据的配置文件运行Firefox之外。您可以加载一个扩展名，该扩展名写入loginTextbox和password1Textbox的chrome://global/content/commonDialog.xul（警报窗口）。

已经有一些扩展可以完成这项工作。例如：关闭代理身份验证

https://addons.mozilla.org/firefox/downloads/latest/close-proxy-authentication/addon-427702-latest.xpi

from selenium import webdriver
from base64 import b64encode

proxy = {'host': HOST, 'port': PORT, 'usr': USER, 'pwd': PASSWD}

fp = webdriver.FirefoxProfile()

fp.add_extension('closeproxy.xpi')
fp.set_preference('network.proxy.type', 1)
fp.set_preference('network.proxy.http', proxy['host'])
fp.set_preference('network.proxy.http_port', int(proxy['port']))
# ... ssl, socks, ftp ...
fp.set_preference('network.proxy.no_proxies_on', 'localhost, 127.0.0.1')

credentials = '{usr}:{pwd}'.format(**proxy)
credentials = b64encode(credentials.encode('ascii')).decode('utf-8')
fp.set_preference('extensions.closeproxyauth.authtoken', credentials)

driver = webdriver.Firefox(fp)

Answer 3

Dup of：如何使用Python/Selenium设置代理身份验证用户名：密码

硒丝：https://github.com/wkeeling/selenium-wire

安装硒线

pip install selenium-wire

导入它

from seleniumwire import webdriver

授权代理

options = {
'proxy': {
    'http': 'http://username:password@host:port',
    'https': 'https://username:password@host:port',
    'no_proxy': 'localhost,127.0.0.1,dev_server:8080'
    }
}
driver = webdriver.Firefox(seleniumwire_options=options)

警告
查看selenium wire缓存文件夹。我遇到了一个问题，因为它占用了我所有的磁盘空间。如果需要，有时必须在脚本中删除它。