python - Scrapy 抓取苹果网站

Question

我尝试从下面的链接获取模型和价格，但没有成功，请让我知道出了什么问题以及如何抓取这两部分？

https://www.apple.com/shop/buy-ipad/ipad-pro

这是我尝试过的:799 美元起

获取单词“来自”

response.xpath('//span[@class="as-price-currentprice"]/text()').extract()

[]

<小时/>

获取价格本身:

response.xpath('//span[@class="nowrap"]/text()').extract()

[u'1\u2011800\u2011MY\u2011APPLE.', u'1\u2011800\u2011MY\u2011APPLE.', u'访问'、u'调用'、u'或']

<小时/>

型号

顺便说一句，我根本无法获得模型

11英寸iPad Pro

12.9英寸iPad Pro

Answer 1

您可以这样做:

headers = response.css('.pd-billboard-subheader::text').getall()
prices = response.css('.pd-billboard-price::text').getall()

result = []
for header, price in zip(headers, prices):
    header_cleaned = header.replace('\xa0', ' ')
    price_cleaned = price.replace('\n', '').replace('        ', '').strip()
    result.append([header_cleaned, price_cleaned])

此后，结果将等于:

[['12.9-inch iPad Pro', 'From $999'],
 ['11-inch iPad Pro', 'From $799'],
 ['10.5-inch iPad Pro', 'From $649'],
 ['iPad', 'From $329'],
 ['iPad mini 4', 'From $399']]