- ubuntu12.04环境下使用kvm ioctl接口实现最简单的虚拟机
- Ubuntu 通过无线网络安装Ubuntu Server启动系统后连接无线网络的方法
- 在Ubuntu上搭建网桥的方法
- ubuntu 虚拟机上网方式及相关配置详解
CFSDN坚持开源创造价值,我们致力于搭建一个资源共享平台,让每一个IT人在这里找到属于你的精彩世界.
这篇CFSDN的博客文章django haystack实现全文检索的示例代码由作者收集整理,如果你对这篇文章有兴趣,记得点赞哟.
全文检索里的组件简介 。
1. 什么是haystack?
1. haystack是django的开源搜索框架,该框架支持Solr,Elasticsearch,Whoosh, *Xapian*搜索引擎,不用更改代码,直接切换引擎,减少代码量.
2. 搜索引擎使用Whoosh,这是一个由纯Python实现的全文搜索引擎, 没有二进制文件等,比较小巧,配置比较简单,当然性能自然略低.
3. 中文分词Jieba,由于Whoosh自带的是英文分词,对中文的分词支持不是太好,故用jieba替换whoosh的分词组件 。
2. 什么是jieba?
很多的搜索引擎对中的支持不友好,jieba作为一个中文分词器就是加强对中文的检索功能 。
3. Whoosh是什么 。
1. Python的全文搜索库,Whoosh是索引文本及搜索文本的类和函数库 。
2. Whoosh 自带的是英文分词,对中文分词支持不太好,使用 jieba 替换 whoosh 的分词组件.
haystack配置使用(前后端分离) 。
1. 安装需要的包 。
1
2
3
|
pip3 install django
-
haystack
pip3 install whoosh
pip3 install jieba
|
2. 在setting.py中配置 。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
|
'''注册app '''
INSTALLED_APPS
=
[
'django.contrib.admin'
,
'django.contrib.auth'
,
'django.contrib.contenttypes'
,
'django.contrib.sessions'
,
'django.contrib.messages'
,
'django.contrib.staticfiles'
,
# haystack要放在应用的上面
'haystack'
,
'myapp'
,
# 这个jsapp是自己创建的app
]
'''配置haystack '''
# 全文检索框架配置
HAYSTACK_CONNECTIONS
=
{
'default'
: {
# 指定whoosh引擎
'ENGINE'
:
'haystack.backends.whoosh_backend.WhooshEngine'
,
# 'ENGINE': 'myapp.whoosh_cn_backend.WhooshEngine', # whoosh_cn_backend是haystack的whoosh_backend.py改名的文件为了使用jieba分词
# 索引文件路径
'PATH'
: os.path.join(BASE_DIR,
'whoosh_index'
),
}
}
# 添加此项,当数据库改变时,会自动更新索引,非常方便
HAYSTACK_SIGNAL_PROCESSOR
=
'haystack.signals.RealtimeSignalProcessor'
|
3. 定义数据库 。
1
2
3
4
5
6
7
8
9
10
11
12
13
|
from
django.db
import
models
# Create your models here.
class
UserInfo(models.Model):
name
=
models.CharField(max_length
=
254
)
age
=
models.IntegerField()
class
ArticlePost(models.Model):
author
=
models.ForeignKey(UserInfo,on_delete
=
models.CASCADE)
title
=
models.CharField(max_length
=
200
)
desc
=
models.SlugField(max_length
=
500
)
body
=
models.TextField()
|
索引文件生成 。
1. 在子应用下创建索引文件 。
在子应用的目录下,创建一个名为 myapp/search_indexes.py 的文件 。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
|
from
haystack
import
indexes
from
.models
import
ArticlePost
# 修改此处,类名为模型类的名称+Index,比如模型类为GoodsInfo,则这里类名为GoodsInfoIndex(其实可以随便写)
class
ArticlePostIndex(indexes.SearchIndex, indexes.Indexable):
# text为索引字段
# document = True,这代表haystack和搜索引擎将使用此字段的内容作为索引进行检索
# use_template=True 指定根据表中的那些字段建立索引文件的说明放在一个文件中
text
=
indexes.CharField(document
=
True
, use_template
=
True
)
# 对那张表进行查询
def
get_model(
self
):
# 重载get_model方法,必须要有!
# 返回这个model
return
ArticlePost
# 建立索引的数据
def
index_queryset(
self
, using
=
None
):
# 这个方法返回什么内容,最终就会对那些方法建立索引,这里是对所有字段建立索引
return
self
.get_model().objects.
all
()
|
2.指定索引模板文件 。
创建文件路径命名必须这个规范:templates/search/indexes/应用名称/模型类名称_text.txt 如: templates/search/indexes/myapp/articlepost_text.txt 。
1
2
3
|
{{
object
.title }}
{{
object
.author.name }}
{{
object
.body }}
|
3.使用命令创建索引 。
1
|
python manage.py rebuild_index
# 建立索引文件
|
替换成jieba分词 。
1.将haystack源码复制到项目中并改名 。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
|
'''1.复制源码中文件并改名 '''
将
/
Library
/
Frameworks
/
Python.framework
/
Versions
/
3.6
/
lib
/
python3.
6
/
site
-
packages
/
haystack
/
backends
/
whoosh_backend.py文件复制到项目中
并将 whoosh_backend.py改名为 whoosh_cn_backend.py 放在APP中如:
myapp\whoosh_cn_backend.py
'''2.修改源码中文件'''
# 在全局引入的最后一行加入jieba分词器
from
jieba.analyse
import
ChineseAnalyzer
# 修改为中文分词法
查找
analyzer
=
StemmingAnalyzer()
改为
analyzer
=
ChineseAnalyzer()
|
索引文件使用 。
1. 编写视图 。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
|
from
django.shortcuts
import
render
# Create your views here.
import
json
from
django.conf
import
settings
from
django.core.paginator
import
InvalidPage, Paginator
from
django.http
import
Http404, HttpResponse,JsonResponse
from
haystack.forms
import
ModelSearchForm
from
haystack.query
import
EmptySearchQuerySet
RESULTS_PER_PAGE
=
getattr
(settings,
'HAYSTACK_SEARCH_RESULTS_PER_PAGE'
,
20
)
def
basic_search(request, load_all
=
True
, form_class
=
ModelSearchForm, searchqueryset
=
None
, extra_context
=
None
, results_per_page
=
None
):
query
=
''
results
=
EmptySearchQuerySet()
if
request.GET.get(
'q'
):
form
=
form_class(request.GET, searchqueryset
=
searchqueryset, load_all
=
load_all)
if
form.is_valid():
query
=
form.cleaned_data[
'q'
]
results
=
form.search()
else
:
form
=
form_class(searchqueryset
=
searchqueryset, load_all
=
load_all)
paginator
=
Paginator(results, results_per_page
or
RESULTS_PER_PAGE)
try
:
page
=
paginator.page(
int
(request.GET.get(
'page'
,
1
)))
except
InvalidPage:
result
=
{
"code"
:
404
,
"msg"
:
'No file found!'
,
"data"
: []}
return
HttpResponse(json.dumps(result), content_type
=
"application/json"
)
context
=
{
'form'
: form,
'page'
: page,
'paginator'
: paginator,
'query'
: query,
'suggestion'
:
None
,
}
if
results.query.backend.include_spelling:
context[
'suggestion'
]
=
form.get_suggestion()
if
extra_context:
context.update(extra_context)
jsondata
=
[]
print
(
len
(page.object_list))
for
result
in
page.object_list:
data
=
{
'pk'
: result.
object
.pk,
'title'
: result.
object
.title,
'content'
: result.
object
.body,
}
jsondata.append(data)
result
=
{
"code"
:
200
,
"msg"
:
'Search successfully!'
,
"data"
: jsondata}
return
JsonResponse(result, content_type
=
"application/json"
)
|
到此这篇关于django haystack实现全文检索的示例代码的文章就介绍到这了,更多相关django haystack 全文检索内容请搜索我以前的文章或继续浏览下面的相关文章希望大家以后多多支持我! 。
原文链接:https://blog.csdn.net/m0_47202787/article/details/106879844 。
最后此篇关于django haystack实现全文检索的示例代码的文章就讲到这里了,如果你想了解更多关于django haystack实现全文检索的示例代码的内容请搜索CFSDN的文章或继续浏览相关文章,希望大家以后支持我的博客! 。
背景: 我最近一直在使用 JPA,我为相当大的关系数据库项目生成持久层的轻松程度给我留下了深刻的印象。 我们公司使用大量非 SQL 数据库,特别是面向列的数据库。我对可能对这些数据库使用 JPA 有一
我已经在我的 maven pom 中添加了这些构建配置,因为我希望将 Apache Solr 依赖项与 Jar 捆绑在一起。否则我得到了 SolarServerException: ClassNotF
interface ITurtle { void Fight(); void EatPizza(); } interface ILeonardo : ITurtle {
我希望可用于 Java 的对象/关系映射 (ORM) 工具之一能够满足这些要求: 使用 JPA 或 native SQL 查询获取大量行并将其作为实体对象返回。 允许在行(实体)中进行迭代,并在对当前
好像没有,因为我有实现From for 的代码, 我可以转换 A到 B与 .into() , 但同样的事情不适用于 Vec .into()一个Vec . 要么我搞砸了阻止实现派生的事情,要么这不应该发
在 C# 中,如果 A 实现 IX 并且 B 继承自 A ,是否必然遵循 B 实现 IX?如果是,是因为 LSP 吗?之间有什么区别吗: 1. Interface IX; Class A : IX;
就目前而言,这个问题不适合我们的问答形式。我们希望答案得到事实、引用资料或专业知识的支持,但这个问题可能会引发辩论、争论、投票或扩展讨论。如果您觉得这个问题可以改进并可能重新打开,visit the
我正在阅读标准haskell库的(^)的实现代码: (^) :: (Num a, Integral b) => a -> b -> a x0 ^ y0 | y0 a -> b ->a expo x0
我将把国际象棋游戏表示为 C++ 结构。我认为,最好的选择是树结构(因为在每个深度我们都有几个可能的移动)。 这是一个好的方法吗? struct TreeElement{ SomeMoveType
我正在为用户名数据库实现字符串匹配算法。我的方法采用现有的用户名数据库和用户想要的新用户名,然后检查用户名是否已被占用。如果采用该方法,则该方法应该返回带有数据库中未采用的数字的用户名。 例子: “贾
我正在尝试实现 Breadth-first search algorithm , 为了找到两个顶点之间的最短距离。我开发了一个 Queue 对象来保存和检索对象,并且我有一个二维数组来保存两个给定顶点
我目前正在 ika 中开发我的 Python 游戏,它使用 python 2.5 我决定为 AI 使用 A* 寻路。然而,我发现它对我的需要来说太慢了(3-4 个敌人可能会落后于游戏,但我想供应 4-
我正在寻找 Kademlia 的开源实现C/C++ 中的分布式哈希表。它必须是轻量级和跨平台的(win/linux/mac)。 它必须能够将信息发布到 DHT 并检索它。 最佳答案 OpenDHT是
我在一本书中读到这一行:-“当我们要求 C++ 实现运行程序时,它会通过调用此函数来实现。” 而且我想知道“C++ 实现”是什么意思或具体是什么。帮忙!? 最佳答案 “C++ 实现”是指编译器加上链接
我正在尝试使用分支定界的 C++ 实现这个背包问题。此网站上有一个 Java 版本:Implementing branch and bound for knapsack 我试图让我的 C++ 版本打印
在很多情况下,我需要在 C# 中访问合适的哈希算法,从重写 GetHashCode 到对数据执行快速比较/查找。 我发现 FNV 哈希是一种非常简单/好/快速的哈希算法。但是,我从未见过 C# 实现的
目录 LRU缓存替换策略 核心思想 不适用场景 算法基本实现 算法优化
1. 绪论 在前面文章中提到 空间直角坐标系相互转换 ,测绘坐标转换时,一般涉及到的情况是:两个直角坐标系的小角度转换。这个就是我们经常在测绘数据处理中,WGS-84坐标系、54北京坐标系
在软件开发过程中,有时候我们需要定时地检查数据库中的数据,并在发现新增数据时触发一个动作。为了实现这个需求,我们在 .Net 7 下进行一次简单的演示. PeriodicTimer .
二分查找 二分查找算法,说白了就是在有序的数组里面给予一个存在数组里面的值key,然后将其先和数组中间的比较,如果key大于中间值,进行下一次mid后面的比较,直到找到相等的,就可以得到它的位置。
我是一名优秀的程序员,十分优秀!