python - 使用 Selenium 抓取 Java 驱动的网站，废话

Question

我对 Python 还很陌生

我正在尝试从其网站获取打印机计数器值。该网站是用 Javascript 编写的，我无法从中获取任何内容。

网站元素如下所示，我需要突出显示元素上的值。

inspect elements

我尝试过使用selenium、requests、webdriver、beautifulsoup。

尝试了所有 webdriver.find 方法等。

我的最新代码如下所示，我尝试了很多其他东西，但一无所获。

from bs4 import BeautifulSoup
import requests
from selenium import webdriver


#url = requests.get('http://url')
#soup = BeautifulSoup(url.text, 'lxml')


driver = webdriver.Chrome('C:/Chrome/Driver/Path')
url = 'http://url'
get = driver.get(url)

html = driver.execute_script("return document.documentElement.outerHTML")

print(html)

我无法从网页中抓取任何内容，无法使用 Xpath、类、ID 或其他内容访问文本框。

我可以成功从除此打印机之外的其他网站获取元素。

感谢帮助

Answer 1

查看图像中的元素面包屑，您的内容似乎位于框架内。 Selenium 将每个帧视为一个单独的文档。您需要先切换到框架中，然后才能对其内容进行操作。

 driver.switch_to.frame(0)

如果是第一帧，上面应该可以工作。然后 driver.page_source 和您的定位器应该开始工作。

我更详细地解释了这一点 in this answer