python - 如何导出文件中的cookie以与python scrapy一起使用

Question

我想使用 scrapy 和 python 使用 cookie 自动登录 SO。但我不知道

1. 如何将 cookie 导出为什么格式，以便我可以将其与 scrapy 一起使用
2. Chrome 中为 stackoverflow 列出了许多像这样的 cookie

现在使用哪一个登录__qca_ _utma_ _utmb_ _utmc __utmz gauthedsgt usr本地存储

3.该文件中包含什么以及如何在 Scrapy 代码中使用它

Answer 1

当您向服务器创建第一个请求时，您应该传递您的 cookie，如 this page 中所述。 :

request_with_cookies = Request(url="http://www.example.com",
                           cookies={'currency': 'USD', 'country': 'UY'})

如果您不希望哪个 cookie 对于身份验证很重要，请使用所有这些 cookie 或尝试使用其中一个。另请检查CookiesMiddleware启用后可以在进一步的请求中保留您的 cookie。

如果你想使用存储在文件中的cookie，我建议你编写这个文件的简单解析器并将文件内容转换为python dict。只要您的文件是简单的纯文本格式，这就会很容易。