gpt4 book ai didi

python - Scrapy - 每个项目都有不同的管道

转载 作者:行者123 更新时间:2023-12-01 02:59:53 24 4
gpt4 key购买 nike

我是 Scrapy 和 python 的新手,所以请原谅我对此的无知。

我需要在数据库中存储两种不同类型的项目。对于其中之一,我需要在插入之前执行一些额外的查询。是否可以根据项目有不同的管道?如果不是,当它们到达管道时我如何区分哪个项目是哪个项目?

最佳答案

基本上,您可以丢弃您不想在某些管道中处理的项目,反之亦然。例如:

class ApplePipeLine(object):

def process_item(self, item, spider):
if not isinstance(item, Apple):
return item
# Do something with Apple
return item


class OrangePipeLine(object):

def process_item(self, item, spider):
if not isinstance(item, Orange):
return item
# Do something with Orange
return item

关于python - Scrapy - 每个项目都有不同的管道,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/43927139/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com