gpt4 book ai didi

google-app-engine - 如何使用 Google App Engine Search API 找到最接近的文档?

转载 作者:太空宇宙 更新时间:2023-11-03 15:22:53 25 4
gpt4 key购买 nike

我在 GAE Search 中有大约 400,000 个文档指数。所有文档都有一个 location GeoPoint 属性,并且分布在整个地球上。一些文档可能与任何其他文档相距超过 4000 公里,其他文档可能彼此相距不到几米。

我想找到最接近一组特定坐标的文档,但发现以下代码给出了不正确的结果:

from google.appengine.api import search

# coords are in the form of a tuple e.g. (50.123, 1.123)
search.Document(
doc_id='meaningful-unique-id',
fields=[search.GeoField(name='location'
value=search.GeoPoint(coords[0], coords[1]))])

# find document function radius is in metres
def find_document(coords, radius=1000000):
sort_expr = search.SortExpression(
expression='distance(location, geopoint(%.3f, %.3f))' % coords,
direction=search.SortExpression.ASCENDING,
default_value=0)

search_query = search.Query(
query_string='distance(location, geopoint(%.3f, %.3f)) < %d' \
% (coords[0], coords[1], radius),
options=search.QueryOptions(
limit=1,
ids_only=True,
sort_options=search.SortOptions(expressions=[sort_expr])))

index = search.Index(name='document-index')
return index.search(search_query)

使用这段代码,我将得到一致但不正确的结果。例如,搜索距离伦敦最近的文件表明最近的文件在苏格兰。我已经验证了有数千个更接近的文件。

我将问题缩小到 radius 参数太大。如果半径降至 12 公里左右 (radius=12000),我会得到正确的结果。 12公里半径范围内一般不超过1000份文件。 (可能与 search.SortOptions(limit=1000) 有关。)

问题是,如果我在地球上数千英里内没有任何文档的稀疏区域,我的搜索函数将不会返回任何 radius=12000(12 公里) .无论我身在何处,我都希望它能将最近的文档返回给我。我如何才能通过一次调用搜索 API 来始终如一地完成这一任务?

最佳答案

我认为问题如下。您的查询将选择最多 10K 个文档,然后根据您的距离排序表达式对这些文档进行排序并返回。 (也就是说,排序实际上并没有遍历所有 400k 文档。)所以我怀疑一些地理上比较近的点没有包含在这个10k的选择中。这就是为什么缩小搜索半径时效果会更好,因为该半径内的总点数较少。

从本质上讲,您希望以一种对您查询的内容有意义的方式将您的查询“点击率”降低到 10k。您至少可以通过多种方式解决这个问题,您可以将这些方式结合起来:

  • 添加一个排名,以便按排名顺序返回最“重要”的文档(根据一些在您的域中有意义的标准),然后这些文档将按距离排序。
  • 过滤一个或多个文档字段(例如,“业务类别”,如果您的文档包含有关业务的信息)以减少候选文档的数量。

(我不认为这个 10k 阈值目前在搜索 API 文档中;我已经提交了一张票来添加它)。

关于google-app-engine - 如何使用 Google App Engine Search API 找到最接近的文档?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/15254983/

25 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com