gpt4 book ai didi

python - distil 网络机器人检测的工作

转载 作者:太空宇宙 更新时间:2023-11-04 06:44:30 25 4
gpt4 key购买 nike

我正在尝试使用 python 中的 Scrapy 框架来抓取网站。但我正在获取验证码。服务器使用 Distil netwrok bot detection 实现 bot 检测。无论如何我可以解决它吗?

最佳答案

我个人将其淹没在代理中。在被阻止之前 4 个请求的 1 个代理,然后我更改代理。我有几万个免费代理,问题不大。但它不是很快,所以我将并发设置为 1k 左右。

关于python - distil 网络机器人检测的工作,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/35314206/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com