javascript - 如何使用 Python 从网站获取嵌入 JSON 数据？

Question

我有一个收集能源数据的设备，上面有一个网络界面，遗憾的是没有 API。

window.dataJSON 中存储有一个 JSON。

我可以通过 Chrome 调试器使用:console.log(JSON.stringify(window.dataJSON)); 获取它的值。

但我的问题是:我如何用 python 获取这些数据？我知道我可以通过以下方式获取页面的源代码:

import urllib2

response = urllib2.urlopen("10.10.10.10")
page_source = response.read()

但是我如何读取存储在window.dataJSON中的JSON？

提前谢谢您!

Answer 1

window 对象仅存在于浏览器中。因此，要获取window的属性，您应该使用浏览器来完成。

您可以使用Selenium :

from selenium import webdriver

driver = webdriver.Chrome()
driver.get('http://www.example.com')

result = driver.execute_script('return JSON.stringify(window.dataJSON)')

如果您不希望显示浏览器，您可以更改 webdriver 以使用 Headless Chrome 或 PhatomJS。

如果 dataJSON 异步分配给 window，您可能需要告诉 driver 等待。