python - 无法从 xpath python 获取值

Question

我想从页面获取值:http://www.tabele-kalorii.pl/kalorie,Actimel-cytryna-miod-Danone.html我可以从第一部分获取所有值，但无法从表“Wartości odżywcze”获取值

我使用这个xpath:

''.join(tree2.xpath("//html/body/div[1]/div[3]/article/div[2]/div/div[4]/div[3]/div/div[1]/div[3]/table[1]/tr[3]/td[2]/span/text()"))

但我什么也没得到。

使用像这样的 xpath:

''.join(tree2.xpath("//html/body/div[1]/div[3]/article/div[2]/div/div[4]/div[3]/div/div[1]/div[3]/table[1]/tr[3]/td[2]//text()"))

我正在获取单词“kcal”，但无法获取值“75,00”

HTML 片段:

<td style="font-weight:bold;"><span id="kcl715">75,00</span> kcal</td>

有人可以帮忙吗？

Answer 1

表中的值是在浏览器中执行的 JavaScript 的帮助下生成的。

解决这个问题的一个选择是通过selenium自动化浏览器。 ，例如 headless PhantomJS:

>>> from selenium import webdriver
>>>
>>> driver = webdriver.PhantomJS()
>>> driver.get("http://www.tabele-kalorii.pl/kalorie,Actimel-cytryna-miod-Danone.html")
>>>
>>> table = driver.find_element_by_xpath(u"//table[tbody/tr/td/h3 = 'Wartości odżywcze']")
>>> for row in table.find_elements_by_css_selector("tr.tr-gorna-kreska"):
...     cells = [td.text for td in row.find_elements_by_tag_name("td")]
...     print cells
... 
[u'Warto\u015b\u0107 energetyczna', u'75,00 kcal', u'75,00 kcal']
[u'Bia\u0142ko', u'2,70 g', u'2,70 g']
[u'W\u0119glowodany', u'11,80 g', u'11,80 g']
[u'T\u0142uszcz', u'1,50 g', u'1,50 g']