python - Scrapy 未按请求填充对象

Question

这是我的代码

蜘蛛.py

def parse(self,response):
    item=someItem()
    cuv=Vitae()
    item['cuv']=cuv
    request=scrapy.Request(url, callback=self.cvsearch)
    request.meta['item'] = item
    yield request

def cvsearch(self, response):
    item=response.meta['item']
    cv=item['cuv']
    cv['link']=response.url
    return item

项目.py

class someItem(Item):
   cuv=Field()

class Vitae(Item):
   link=Field()

没有显示错误!

它将对象“cuv”添加到“item”，但从未添加“cuv”的属性，我在这里缺少什么？

Answer 1

为什么你在另一个里面使用 scrapy.Item ？尝试在 item['cuv'] 中使用简单的 python 字典。并尝试将 request.meta 移动到 scrapy.Request 构造函数参数。并且您应该使用 yield 而不是 return

def parse(self,response):
    item=someItem()
    request=scrapy.Request(url, meta={'item': item} callback=self.cvsearch)
    yield request

def cvsearch(self, response):
    item=response.meta['item']
    item['cuv'] = {'link':response.url}
    yield item