gpt4 book ai didi

elasticsearch - elasticsearch中的path_hierarchy

转载 作者:行者123 更新时间:2023-12-02 22:52:40 24 4
gpt4 key购买 nike

是否可以将path_hierarchy标记符与其中包含空格的路径一起使用,并使其仅基于分隔符而不是空白来创建标记?例如,

“/机场/机库1”

将被标记为

“机场”,“机库1”,



“机场”,“机库”,“1”?

最佳答案

path_hierarchy token 生成器可以完美地处理具有空格的路径:

curl "localhost:9200/_analyze?tokenizer=path_hierarchy&pretty=true" -d "/airport/hangar 1"
{
"tokens" : [ {
"token" : "/airport",
"start_offset" : 0,
"end_offset" : 8,
"type" : "word",
"position" : 1
}, {
"token" : "/airport/hangar 1",
"start_offset" : 0,
"end_offset" : 17,
"type" : "word",
"position" : 1
} ]
}

但是,根据您的示例,您可能需要改为使用 pattern标记程序。

关于elasticsearch - elasticsearch中的path_hierarchy,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/15594749/

24 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com