Scrapy:项目和字段的默认值。什么是最好的实现？

Question

据我从文档和网络上的各种讨论中了解到，将默认值添加到 scrapy 项目中的字段的功能已被删除。

这不起作用

category = Field(default='null')

所以我的问题是:用默认值初始化字段的好方法是什么？

我已经尝试按照此处的建议将其实现为项目管道，但没有成功。
https://groups.google.com/forum/?fromgroups=#!topic/scrapy-users/-v1p5W41VDQ

Answer 1

想通了是什么问题。管道正在工作(代码如下供其他人引用)。我的问题是，我将值附加到一个字段。我希望默认方法适用于这些列表值之一......选择了一种不同的方式并且它可以工作。我现在正在使用自定义 setDefault 处理器方法实现它。

class DefaultItemPipeline(object):

def process_item(self, item, spider):
    item.setdefault('amz_VendorsShippingDurationFrom', 'default')
    item.setdefault('amz_VendorsShippingDurationTo', 'default')
    # ...
    return item