gpt4 book ai didi

javascript - 检测自动 Web 请求

转载 作者:行者123 更新时间:2023-11-30 10:48:01 25 4
gpt4 key购买 nike

我们正在努力为进入我们网站的自动请求数量获取更好的指标。我们的站点提供大量数据,但也提供网页。很容易区分服务的网页和服务的数据文件,但服务的一些数据文件是通过网页手动请求生成的。自动请求通常使用 curl 或 wget 等程序直接获取数据。

我们目前的做法是定期查看用户代理字符串,并根据用户代理(例如wget)判断这是一个自动请求。问题是新代理一直在增加,所以我们落后了。而且,其中一些以自动方式检索数据的人通过使用用户代理字符串来伪造数据,这些用户代理字符串声称它们是浏览器,而实际上它们不是。

我突然想到,如果基于 Apache 日志条目我们可以确定“Javascript 已开启”,那么请求就会由人发出。它并不完美,但它会比我们现在拥有的更好、更便携。如果我们检测到它已关闭,我们可以将其视为自动请求。

这样的事情可能吗?是否有足够智能的代​​码或库可以为我们完成这项工作,并定期维护?

最佳答案

关于javascript - 检测自动 Web 请求,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/7191814/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com