python - 如何获取 anchor 标签内的元素？

Question

请原谅我，我对 Selenium 和 Python 中的网络抓取非常陌生。我正在尝试抓取超市网站的内容，该网站的 html 中有以下部分

<div class="itemDescription">
            <meta itemprop="priceCurrency" content="INR">
            <meta itemprop="price" content="23.00">
        <h4 class=""><strong class="price js-effective-mrp" data-currency="₹">₹ 23.00 </strong>
                                    <s class="js-actual-mrp" style="display:none;"></s>
                                <br><a href="/fresh-onion-red-v-1-kg-p.php" class="">Fresh Onion Red <span class="item-quantity">1 Kg</span></a></h4>
                    </div>

我需要产品的价格、数量和名称。

下面是我编写的代码，但它没有正确解析元素。

div = driver.find_element_by_class_name('itemDescription')
sname =div.find_element_by_css_selector('a').get_attribute('href')
squantity =driver.find_elements_by_class_name('item-quantity')
sprice = driver.find_elements_by_xpath('//*[contains(concat( " ", @class, " " ), concat( " ", "js-effective-mrp", " " ))]')

请帮忙

Answer 1

试试这个 xPath 价格:

//strong[@class='price js-effective-mrp' and @data-currency='₹']

或者如果您想要所有货币:

//strong[@class='price js-effective-mrp']

此链接:

//div[@class='itemDescription']//a

数量:

//span[@class = 'item-quantity']

示例:

sname = driver.find_element_by_xpath("//div[@class='itemDescription']//a")
squantity = driver.find_element_by_xpath("//span[@class = 'item-quantity']")
sprice = driver.find_element_by_xpath("//strong[@class='price js-effective-mrp' and @data-currency='₹']")

print(squantity.text) # prints quantity
print(sname.text) # prints name
print(sprice.text) # prints price

根据您的反馈，您无法从列表中获取文本，但您可以从列表中的每个元素获取文本，如下所示:

sname_list = driver.find_elements_by_xpath("//div[@class='itemDescription']//a")
for sname in sname_list:
    print(sname.text) # print the text of every element in the list