- Java锁的逻辑(结合对象头和ObjectMonitor)
- 还在用饼状图?来瞧瞧这些炫酷的百分比可视化新图形(附代码实现)⛵
- 自动注册实体类到EntityFrameworkCore上下文,并适配ABP及ABPVNext
- 基于Sklearn机器学习代码实战
search_as_you_type字段类型用于自动补全,当用户输入搜索关键词的时候,还没输完就可以提示用户相关内容。as_you_type应该是说当你打字的时候。它会给索引里的这个类型的字段添加一些子字段_2gram _3gram和_index_prefix。_2gram的意思是,如果一个值是abcd, 2 gram就是ab bc cd, 3 gram就是abc bcd cde.先混个眼熟.
先看看这个search_as_you_type怎么用,创建索引:
PUT test_ngram { "mappings" : { "properties" : { "title" : { "type": "search_as_you_type" } } } }
插入一个文档:
PUT test_ngram/_doc/1 { "title":"i am joe" }
进行搜索:
GET test_ngram/_search { "query" : { "multi_match" : { "query": "jo" , "type": "bool_prefix" , "fields" : [ "title" ] } } }
这里的搜索条件是jo,不是一个完整的词,是joe的开头两个字母但是仍然能搜索到结果,分数是1.0,如果搜索 i jo,也能搜索到结果,分数是1.287682,更高,注意这里原来的值是 i am joe,搜索条件是i jo,中间没有am也能搜索,说明是把搜索条件分成了 i 和jo两个单词,即搜索了i也搜索了jo,一个单词 i 匹配评分是1,但是两个单词 i 和 jo都匹配分数就更高,是1.287682,如果jo没有匹配的话分数应该更低,比如你搜索 i oj 分数就是0.2876821 。
然后我们再来看看三个词的搜索 i am jo ,可以看到分数更高了是1.5753641,说明这三个词都匹配到了,最后一个是前缀匹配,那如果我们搜索 i a jo呢,分数又降低和两个词匹配一样的分数1.287682,说明a并没有匹配到,为什么a不能匹配到am呢,不是前缀匹配吗?这里只能是最后一个单词是前缀匹配,比如这里的 jo,注意是搜索条件里面的最后一个单词不是字段值里面的最后一个单词,你搜索i a分数也是1.287682,也能匹配2个词.
所以结论就是这里会对搜索条件的最后一个词进行前缀匹配(如果是中文的话,不是按空格分词,而是根据ik分词器分词).
还要注意这里的"type": "bool_prefix",指定了这个参数才能使用前缀匹配,如果去掉这个参数再搜索 jo 是没有结果的.
。
然后还有一点这里使用multi_match是为了多字段搜索,所以你可以在fields参数里面多指定几个参数:
"fields": ["title","title._2gram","title._3gram"],这样也能搜索出结果,但是一般都要带上主字段"title",否则搜索不到结果,比如:
GET test_ngram/_search { "query" : { "multi_match" : { "query": "wa" , "type": "bool_prefix" , "fields": ["title._2gram","title._3gram" ] } } }
这样就搜索不到,要加上主字段title, "fields": ["title","title._2gram","title._3gram"]就能搜到了.
。
那么前面提到的_2gram _3gram和_index_prefix是怎么回事呢?,也就是了解search_as_you_type的工作原理,这里我们可以打开底层的Lucene索引来具体看看到底这两个字段是怎么回事 。
那么怎么才能查看es底层的Lucene索引呢,首先有一个工具叫luke,以前是一个独立的项目,github地址是 。
https://github.com/DmitryKey/luke 。
但是后来已经合并到Lucene本身里面了,你可以下载Lucene 。
https://lucene.apache.org/core/downloads.html 。
这里我用的es版本是7.1.0,下载的Lucene版本是8.7.0,下载的lucene-8.7.0.tgz,(点击Older releases),下载了解压,找到里面的luke文件夹,如果是windows,有一个luke.bat双击就能运行。运行后是一个swing的界面,可以打开Lucene索引,但是相关的Lucene索引在哪呢?
通过es查询:
GET test_ngram
响应里面有一个 "uuid" : "GwxlNOMaRiabTL0BmStlAA",通过它就可以找到索引,比如我这里的位置就是 。
...\elasticsearch-7.10.1-windows-x86_64\elasticsearch-7.10.1\data\nodes\0\indices\GwxlNOMaRiabTL0BmStlAA 。
具体位置根据你的设置不同而不同。通过这个地址可以在luke里面打开它,点击open,就选择这个路径,打开后看到如下界面:
为什么啥也没有呢?好问题。因为es的索引还在缓存中,没有落盘,如何才能让它保存了我们好看呢?调用es的接口:
POST test_ngram/_flush
然后在luke中点击reopen current index,就可以看到有数据。但是这里为了看得更清楚,我们先删除所有文档,再插入一个简单的值:"on",先删除文档:
POST test_ngram/_delete_by_query { "query" :{ "match_all" :{} } }
再插入一个文档并flush:
POST test_ngram/_doc/1 { "title":"on" }
POST test_ngram/_flush
然后在luke中点击reopen current index,可以看到 。
左边是索引里字段,如果你选择_2gram或者_3gram,然后点击show top terms 你会看到右边是空的,为什么呢,因为这个唯一的文档里面只有一个字段,这个字段的值还只有一个词,所以不会形成2 gram或者3 gram。但是你选择title._index_prefix,再点击show top terms,可以看到上图中显示的,这里在菜单里面点击导出terms,可以看到 。
o,1 on, 1 on , 1 on , 1
也就是说会在on后面加上两个空格,然后依次是o on on一个空格 on两个空格,所以这就是为什么这里你可以搜索o为前缀的原因,已经有o这个term了,可以直接搜索.
然后为了进一步了解原理,我们更新一下文档,然后flush:
POST test_ngram/_doc/1 { "title":"on a way" }
POST test_ngram/_flush
reopen current index, expoert terms,可以看到title._2gram有2个:on a和a way各出现了两次,而title._3gram里面有1个on a way出现了2次,而导出的title._prefix_index字段如下:
a,2 a , 2 a w, 2 a wa, 2 a way, 2 a way , 2 o, 2 on, 2 on , 2 on a, 2 on a , 2 on a w, 2 on a wa, 2 on a way, 2 w, 2 wa, 2 way, 2 way , 2 way , 2
可以看出,就是对on a和a way和on a way进行了edge ngrams,edge ngram就是说,如果有一个单词abcde,edge ngram之后就是a ab abc abcd abcde,所以先是得到_2gram和_3gram,再对他们进行edge ngrams,就得到了title._prefix_index。所以这就解释了为什么你前面搜索i a jo后a搜索不到了,因为i am joe进行edge ngrams后是i 和 i a 和 i am 和i am j 和i am jo 和i am joe,就是没有i a jo.
查看官网 https://www.elastic.co/guide/en/elasticsearch/reference/current/search-as-you-type.html 可以了解更多,里面提到你还可以使用_4gram,只要你改变max_shingle_size配置 。
至此你就知道了search_as_you_type的用法和原理,以及该类型字段包含的子字段_2gram _3gram _prefix_index,还能通过luke工具分析es底层的Lucene索引的真实面目.
。
最后此篇关于elasticsearch中的数据类型search_as_you_type及查看底层Lucene索引的文章就讲到这里了,如果你想了解更多关于elasticsearch中的数据类型search_as_you_type及查看底层Lucene索引的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
初学者 android 问题。好的,我已经成功写入文件。例如。 //获取文件名 String filename = getResources().getString(R.string.filename
我已经将相同的图像保存到/data/data/mypackage/img/中,现在我想显示这个全屏,我曾尝试使用 ACTION_VIEW 来显示 android 标准程序,但它不是从/data/dat
我正在使用Xcode 9,Swift 4。 我正在尝试使用以下代码从URL在ImageView中显示图像: func getImageFromUrl(sourceUrl: String) -> UII
我的 Ubuntu 安装 genymotion 有问题。主要是我无法调试我的数据库,因为通过 eclipse 中的 DBMS 和 shell 中的 adb 我无法查看/data/文件夹的内容。没有显示
我正在尝试用 PHP 发布一些 JSON 数据。但是出了点问题。 这是我的 html -- {% for x in sets %}
我观察到两种方法的结果不同。为什么是这样?我知道 lm 上发生了什么,但无法弄清楚 tslm 上发生了什么。 > library(forecast) > set.seed(2) > tts lm(t
我不确定为什么会这样!我有一个由 spring data elasticsearch 和 spring data jpa 使用的类,但是当我尝试运行我的应用程序时出现错误。 Error creatin
在 this vega 图表,如果我下载并转换 flare-dependencies.json使用以下 jq 到 csv命令, jq -r '(map(keys) | add | unique) as
我正在提交一个项目,我必须在其中创建一个带有表的 mysql 数据库。一切都在我这边进行,所以我只想检查如何将我所有的压缩文件发送给使用不同计算机的人。基本上,我如何为另一台计算机创建我的数据库文件,
我有一个应用程序可以将文本文件写入内部存储。我想仔细看看我的电脑。 我运行了 Toast.makeText 来显示路径,它说:/数据/数据/我的包 但是当我转到 Android Studio 的 An
我喜欢使用 Genymotion 模拟器以如此出色的速度加载 Android。它有非常好的速度,但仍然有一些不稳定的性能。 如何从 Eclipse 中的文件资源管理器访问 Genymotion 模拟器
我需要更改 Silverlight 中文本框的格式。数据通过 MVVM 绑定(bind)。 例如,有一个 int 属性,我将 1 添加到 setter 中的值并调用 OnPropertyChanged
我想向 Youtube Data API 提出请求,但我不需要访问任何用户信息。我只想浏览公共(public)视频并根据搜索词显示视频。 我可以在未经授权的情况下这样做吗? 最佳答案 YouTube
我已经设置了一个 Twilio 应用程序,我想向人们发送更新,但我不想回复单个文本。我只是想让他们在有问题时打电话。我一切正常,但我想在发送文本时显示传入文本,以确保我不会错过任何问题。我正在使用 p
我有一个带有表单的网站(目前它是纯 HTML,但我们正在切换到 JQuery)。流程是这样的: 接受用户的输入 --- 5 个整数 通过 REST 调用网络服务 在服务器端运行一些计算...并生成一个
假设我们有一个名为 configuration.js 的文件,当我们查看内部时,我们会看到: 'use strict'; var profile = { "project": "%Projec
这部分是对 Previous Question 的扩展我的: 我现在可以从我的 CI Controller 成功返回 JSON 数据,它返回: {"results":[{"id":"1","Sourc
有什么有效的方法可以删除 ios 中 CBL 的所有文档存储?我对此有疑问,或者,如果有人知道如何从本质上使该应用程序像刚刚安装一样,那也会非常有帮助。我们正在努力确保我们的注销实际上将应用程序设置为
我有一个 Rails 应用程序,它与其他 Rails 应用程序通信以进行数据插入。我使用 jQuery $.post 方法进行数据插入。对于插入,我的其他 Rails 应用程序显示 200 OK。但在
我正在为服务于发布请求的 API 调用运行单元测试。我正在传递请求正文,并且必须将响应作为帐户数据返回。但我只收到断言错误 注意:数据是从 Azure 中获取的 spec.js const accou
我是一名优秀的程序员,十分优秀!