python - XPath 表达式在网站上不起作用

Question

我正在抓取一个网站

这就是我的路

    response.xpath(".//div[@id='search_listing']/ul[@id='listings']/li[@class='item']")

我得到了空结果，但正如你在下面看到的，有一些值:

我正在起诉 scrapy

Answer 1

查看 item 类后面的额外空格:

<li class="item ">...
           HERE^

这就是您的 @class='item' 条件不起作用的原因。您必须使用 contains()对于部分匹配:

.//div[@id='search_listing']/ul[@id='listings']/li[contains(@class, 'item')]

<小时/>

我会研究 CSS 选择器以获得更简洁的定位技术:

response.css("#search_listing #listings .item")