gpt4 book ai didi

python - Scrapy crawl命令输出如何保存

转载 作者:太空狗 更新时间:2023-10-29 19:31:07 25 4
gpt4 key购买 nike

我正在尝试保存我尝试过的 scrapy crawl 命令的输出scrapy crawl someSpider -o some.json -t json >> some.text但它不起作用......有人能告诉我如何将输出保存到文本文件......我的意思是 scrapy 打印的日志和信息......

最佳答案

您可以将这些行添加到您的 settings.py:

LOG_STDOUT = True
LOG_FILE = '/tmp/scrapy_output.txt'

然后开始正常抓取:

scrapy crawl someSpider

关于python - Scrapy crawl命令输出如何保存,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/16650397/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com