如何将browsermob与python selenium结合使用？

Question

我想在使用selenium进行GUI测试时使用Browsermob来监控网络连接。我发现了一些信息和留档在这里，这里和这里，但绝对不清楚如何真正使用它。

文件内容如下：

server = Server("path/to/browsermob-proxy")

但这条路是什么？在哪里可以找到它？

另外我看到

java -jar browsermob.jar --port 9090

但是，如果这个jar文件是browsermob安装的一部分，或者是一些不相关的东西，则根本没有解释它是什么。

如果有人能提供一个关于如何使用browsermob以及我需要安装什么的完整且有效的示例，我将不胜感激。。。

Answer 1

您需要将驱动程序配置为使用BMP作为代理，以便它可以记录网络活动。这里有一个例子......

from browsermobproxy import Server
from selenium import webdriver

server = Server('/path/to/bmp/bin/browsermob-proxy') #Local path to BMP
server.start()
proxy = server.create_proxy() #Proxy is used to generate a HAR file containing the connection URLS that the MP3s are loaded from.
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument("--proxy-server={0}".format(proxy.proxy)) #Configure chrome options
driver = webdriver.Chrome(chrome_options=chrome_options)
proxy.new_har('filename') 

然后所有的活动将被记录到该文件中。

在我的例子中，二进制文件的路径是C:\Python27\Lib\site packages\browsermobproxy\browsermob-proxy-2.1。0-beta-3\bin\browsermob代理在使用Python 2.7的Windows上

Answer 2

    from browsermobproxy import Server
    import psutil
    import time
    
    for proc in psutil.process_iter():
        # check whether the process name matches
        if proc.name() == "browsermob-proxy":
            proc.kill()
    
    dict = {'port': 8090}
    server = Server(path="./BrowserMobProxy/bin/browsermob-proxy", options=dict)
    server.start()
    time.sleep(1)
    proxy = server.create_proxy()
    time.sleep(1)
    from selenium import webdriver
    profile = webdriver.FirefoxProfile()
    selenium_proxy = proxy.selenium_proxy()
    profile.set_proxy(selenium_proxy)
    driver = webdriver.Firefox(firefox_profile=profile)
    
    
    proxy.new_har("google")
    driver.get("http://www.google.co.uk")
    print (proxy.har) # returns a HAR JSON blob
    
    server.stop()
    driver.quit()

有两件事，如果你的代码失败了，这个过程有时会被打开。因此，我在下面添加了关闭重复实例的代码。

import psutil
import time

for proc in psutil.process_iter():
    # check whether the process name matches
    if proc.name() == "browsermob-proxy":
        proc.kill()

还在创建代理之前和之后Hibernate1秒。

server.start()
time.sleep(1)
proxy = server.create_proxy()
time.sleep(1)

这有助于消除由于服务器需要一些时间启动而可能遇到的一些间歇性问题。

Answer 3

BrowserMob Proxy是一种开源工具，用于以HAR格式捕获web应用程序的性能数据。它还允许操纵浏览器行为和流量，如模拟网络流量、重写HTTP请求和响应等，并操纵来自AJAX应用程序的网络流量。简而言之，BrowserMob proxy帮助我们使用Selenium WebDriver自动测试捕获web应用程序的客户端性能数据。

您可以从Python文档和本教程中找到有关BrowserMob代理的更多详细信息。

>

通过CLI安装Browsermob代理：

C:\Users\your_user>pip install browsermob-proxy
Collecting browsermob-proxy
  Downloading browsermob-proxy-0.8.0.tar.gz
Collecting requests>=2.9.1 (from browsermob-proxy)
  Downloading requests-2.18.4-py2.py3-none-any.whl (88kB)
    100% |¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦| 92kB 148kB/s
Collecting idna<2.7,>=2.5 (from requests>=2.9.1->browsermob-proxy)
  Downloading idna-2.6-py2.py3-none-any.whl (56kB)
    100% |¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦| 61kB 639kB/s
Collecting urllib3<1.23,>=1.21.1 (from requests>=2.9.1->browsermob-proxy)
  Downloading urllib3-1.22-py2.py3-none-any.whl (132kB)
    100% |¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦| 133kB 250kB/s
Collecting certifi>=2017.4.17 (from requests>=2.9.1->browsermob-proxy)
  Downloading certifi-2017.11.5-py2.py3-none-any.whl (330kB)
    100% |¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦| 337kB 401kB/s
Collecting chardet<3.1.0,>=3.0.2 (from requests>=2.9.1->browsermob-proxy)
  Downloading chardet-3.0.4-py2.py3-none-any.whl (133kB)
    100% |¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦¦| 143kB 296kB/s
Installing collected packages: idna, urllib3, certifi, chardet, requests, browse
rmob-proxy
  Running setup.py install for browsermob-proxy ... done
Successfully installed browsermob-proxy-0.8.0 certifi-2017.11.5 chardet-3.0.4 id
na-2.6 requests-2.18.4 urllib3-1.22

下载browsermob代理二进制文件browsermob-proxy-2.1。4-bin格式的url如下：

https://bmp.lightbody.net/

提取和保存C中的目录：

通过CLI命令手动启动Browsermobproxy服务器：

C:\Utility\browsermob-proxy-2.1.4\lib>java -jar browsermob-dist-2.1.4.jar --port 9090
Running BrowserMob Proxy using LittleProxy implementation. To revert to the legacy implementation, run the proxy with the command-line option '--use-littleproxy false'.
[INFO  2018-01-17T19:01:30,276 net.lightbody.bmp.proxy.Main] (main) Starting BrowserMob Proxy version 2.1.4
[INFO  2018-01-17T19:01:30,388 org.eclipse.jetty.util.log] (main) jetty-7.x.y-SNAPSHOT
[INFO  2018-01-17T19:01:30,471 org.eclipse.jetty.util.log] (main) started o.e.j.s.ServletContextHandler{/,null}
[INFO  2018-01-17T19:01:30,871 org.eclipse.jetty.util.log] (main) Started SelectChannelConnector@0.0.0.0:9090

您还可以通过下面的代码启动Browsermobproxy服务器。

创建一个新的PyDev模块（如果使用Eclipse），并通过您的IDE编写一个基本程序，如下所示：

from browsermobproxy import Server
server = Server("C:\\Utility\\browsermob-proxy-2.1.4\\bin\\browsermob-proxy")
server.start()
proxy = server.create_proxy()

from selenium import webdriver
profile  = webdriver.FirefoxProfile()
profile.set_proxy(proxy.selenium_proxy())
driver = webdriver.Firefox(firefox_profile=profile)


proxy.new_har("google")
driver.get("http://www.google.co.in")
proxy.har # returns a HAR JSON blob

server.stop()
driver.quit()

快照：

>

bmp.log
geckodriver.log
server.log