gpt4 book ai didi

python - 服务器如何区分使用 TBB 的用户和仅使用 Tor 作为代理的用户?

转载 作者:行者123 更新时间:2023-11-28 19:17:19 24 4
gpt4 key购买 nike

我目前正在(合法地)抓取一些网站,在 python 上使用 urllib2,在 Tor 上使用 socksipy。我已将 header 字段更改为与 TBB 相同。但是,某些网站似乎将我检测为蜘蛛/抓取工具。他们如何做到这一点?

最佳答案

很可能这些网站设置 cookie 并使用 urllib 不执行的 JavaScript。

使用真正的浏览器 (TBB) WebDriver .

关于python - 服务器如何区分使用 TBB 的用户和仅使用 Tor 作为代理的用户?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/32058211/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com