google-custom-search - 谷歌自定义搜索api在不同页面上返回不同的总结果

Question

在 Google 自定义搜索 API 中， response.queries.request[0] 对象中返回的“totalResults”字段似乎在搜索结果的最后一页上减少了。例如，如果搜索结果总共有 17 个，并且我发送了一个附加了“&start=11”的相同请求，则“response.queries.request[0].totalResults”的值从 17 下降到 12。

我不确定是什么原因造成的，或者它是否甚至在我的一端(谷歌是否可以在事后过滤掉重复的条目？)。

Answer 1

这不是你的问题，而是谷歌本身的问题。您可以直接在 Google 上尝试相同的查询，并且在分页结束时您会发现不一致的总结果。不确定确切原因，但是当您有大量海量数据要处理、跨海量基础设施并行处理并且受到大量动态因素影响时，这种问题并不少见。是的，可以是重复条目过滤、版权删除等。

如果您正在计算自己的开始指数，那么如果收到的新总结果低于您的开始指数，您可以做的是调整您的开始指数。但最好使用来自 API 的开始索引。