python - 我如何使用 scrapy 提取具有某些文本匹配的链接

Question

我想点击文本中“下一步”的链接，例如

<div id="pagination"
<a href="#" > 1 </a>
<a href="#" > 2 </a>
<a href="#" > 3 </a>
<a href="#" > Next </a>
</div>

我怎样才能做到这一点？这也是最后一个选择

Answer 1

创建一个扩展BaseSgmlLinkExtractor的类，并提供可调用的process_value，如docs所示