Python selenium 防止网站被阻塞

Question

我脑子里并没有真正的项目，只是在我开始想知道如何防止网站知道我反复访问它们时想弄清楚。

我不知道如何使用 selenium，这就是为什么我进行了很多尝试和错误 - 网站突然阻止了我。我打开了 protonvpn(免费)，但它仍然不让我进入那个网站。我读到了关于 chrome 和代理的虚假用户代理以及所有这些东西，但关键是什么？第二次进入之前需要做什么，才能让别人知道是我？

是否足以更改我的 IP 地址？这是要走的路吗？我没有找到合适的 python 相关答案

Answer 1

这里的问题听起来有两个方面:

1. 许多网站都有用户代理检测方法，可以识别自动化工具，例如 Selenium。

2. 针对网站快速执行操作通常会触发机器人检测工具，这也是不明智的做法。通常对于抓取站点，如果您不确定有什么样的反机器人或反垃圾邮件系统，您希望将抓取器配置为具有类似人类的操作执行时间。

最好的办法是检查 selenium 用户代理并将其配置为其他内容 as per this post here .