如何从Selenium Webdriver Firefox中的driver.page_source获取HTTP请求的原始JSON响应
如果浏览到，https://httpbin.org/headers我希望得到以下JSON响应：
{
"headers": {
"Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8",
"Accept-Encoding": "gzip, deflate, br",
"Accept-Language": "en-US,en;q=0.5",
"Connection": "close",
"Host": "httpbin.org",
"Upgrade-Insecure-Requests": "1",
"User-Agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:64.0) Gecko/20100101 Firefox/64.0"
}
}
但是，如果我使用selenium
from selenium import webdriver
from selenium.webdriver.firefox.options import Options
options = Options()
options.headless = True
driver = webdriver.Firefox(options=options)
url = 'https://httpbin.org/headers'
driver.get(url)
print(driver.page_source)
driver.close()
我懂了
<html platform="linux" class="theme-light" dir="ltr"><head><meta http-equiv="Content-Security-Policy" content="default-src 'none' ; script-src resource:; "><link rel="stylesheet" type="text/css" href="resource://devtools-client-jsonview/css/main.css"><script type="text/javascript" charset="utf-8" async="" data-requirecontext="_" data-requiremodule="viewer-config" src="resource://devtools-client-jsonview/viewer-config.js"></script><script type="text/javascript" charset="utf-8" async="" data-requirecontext="_" data-requiremodule="json-viewer" src="resource://devtools-client-jsonview/json-viewer.js"></script></head><body><div id="content"><div id="json">{
"headers": {
"Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8",
"Accept-Encoding": "gzip, deflate, br",
"Accept-Language": "en-US,en;q=0.5",
"Connection": "close",
"Host": "httpbin.org",
"Upgrade-Insecure-Requests": "1",
"User-Agent": "Mozilla/5.0 (X11; Ubuntu; Linux x86_64; rv:64.0) Gecko/20100101 Firefox/64.0"
}
}
</div></div><script src="resource://devtools-client-jsonview/lib/require.js" data-main="resource://devtools-client-jsonview/viewer-config.js"></script></body></html>
HTML标记来自哪里？如何从获得HTTP请求的原始JSON响应driver.page_source？
问题答案：
除了原始JSON响应外，driver.page_source还包含HTML以在浏览器中“漂亮地打印”响应。如果使用Firefox DOM和Style
Inspector在浏览器中查看JSON响应的源，您将得到相同的结果。
要获取原始JSON响应，您可以照常浏览HTML元素：
print(driver.find_element_by_xpath("//div[@id='json']").text)
-
问题内容： 我现在正在尝试使用Java Cord中的HTTP请求获取JSON对象。 我想知道如何在下面的代码中获取响应或JSON对象。 请告诉我。 （在此程序中，我尝试获取文章“ New York”的Wikipedia类别。） 问题答案：
-
我如何解析JSON请求之类的东西？ 示例代码： 带有_名称的位置_为无
-
问题内容： 尝试在Python中获取HTTP响应内容的原始数据。我有兴趣通过另一个渠道转发响应，这意味着理想情况下，内容应尽可能原始。 什么是做到这一点的好方法？ 问题答案： 如果使用呼叫获取HTTP响应，则可以使用响应的属性。这是docs中的代码。
-
如何获得原始json输出。如果可能的话，我不想实现用户数据类和解析器。有什么办法吗？ 标记重复的帖子（获得原始HTTP响应与改造）不是为Kotlin和我需要Kotlin版本。
-
问题内容： 我有一个包含表单（帖子）的html。单击某些提交按钮时，我会收到JSON响应。 如何获取此JSON？ 如果我不截取请求，则json将显示在Web视图上，所以我想应该使用（我正在使用API 12），但是我不知道如何在其中获取json。 还是有更好的方法，例如拦截响应而不是请求？ 谢谢 问题答案： 您应该重写的方法
-
问题内容： 有什么方法可以获取原始响应的HTTP标头？ 该方法对我不起作用，因为服务器吐出了多个“ Set-Cookie”，其中一些丢失了。 问题答案： 该方法对我不起作用 您是在的情况下问这个的吗？不可以，无法使用原始HTTP响应标头。您需要退回到低级的Socket编程。这是一个SSCCE，只需复制“ 粘贴 ”即可运行它。 为了避免每个尝试此代码片段的人都使SO过载，输出如下所示： 要了解有关以