google-maps - 爬虫/机器人是否消耗 Maps APIs Credits？

Question

由于 Google Maps API 更改为“积分”，我的问题是:
爬虫/机器人(来自搜索引擎或看门狗，例如“上升趋势”)是否消耗 Maps APIs Credits？

如果是这样，是否有可能像在 Google-Analytics 中那样“排除”它们？

我想避免“无所事事”的大量成本。

提前致谢
托比

Answer 1

我的经验是，是的，对 Maps API 的请求确实会创建一个交易，即使机器人或爬虫访问该页面也是如此。当免费配额方法停用后​​，Google 更改为 200 美元的信用系统时，我也不得不仔细研究这一点。我的网站每天发出大约 3,000 个 map 请求。然而，谷歌分析显示我每天需要 map 请求的页面浏览量只有 700!为了避免这让我付出沉重的代价，我能够切换到使用没有限制且免费的嵌入 map 。

对我的服务器访问日志的分析表明，确实，大多数页面浏览量来自爬虫和机器人。这与我见过的报告一致，其中包括 52% of website visits are from crawlers and bots .在我的网站上，爬虫/机器人百分比接近 75%。那是因为我有大约 50,000 页。人流量集中在一小部分受欢迎的页面上，而爬虫/机器人则全部访问它们。

您的第二个问题询问是否有一种方法可以像 Google Analytics 中提供的选项那样排除机器人。不，它不作为 Maps API 中的一个选项提供。您可以检测代码中是否存在机器人并抑制 api 请求，如 PHP Stop Bot solution .这是过滤掉它们的初步开始。可以通过使用像这样的机器人/爬虫检测器来增强它:https://github.com/JayBizzle/Crawler-Detect

我会注意到有好机器人和坏机器人。您当然希望您的页面内容由 Google 和 Bing 索引并提供 map 。不要盲目地排除所有机器人/爬虫。

我在一个需要收费的 Map and Places API 请求的项目中非常投入。我可能会使用 https://51degrees.com/ 提供的服务用于机器人检测。他们有针对设备检测的免费和付费解决方案。在这个过程中，他们的 API 识别人与否!

祝你好运。