Django 全文检索6.3

举报
Lansonli 发表于 2021/09/29 01:18:55 2021/09/29
【摘要】 全文检索 全文检索不同于特定字段的模糊查询,使用全文检索的效率更高,并且能够对于中文进行分词处理haystack:django的一个包,可以方便地对model里面的内容进行索引、搜索,设计为支持whoosh,solr,Xapian,Elasticsearc四种全文检索引擎后端,属于一种全文检索的框架whoosh:纯Python编写的全...

全文检索

  • 全文检索不同于特定字段的模糊查询,使用全文检索的效率更高,并且能够对于中文进行分词处理
  • haystack:django的一个包,可以方便地对model里面的内容进行索引、搜索,设计为支持whoosh,solr,Xapian,Elasticsearc四种全文检索引擎后端,属于一种全文检索的框架
  • whoosh:纯Python编写的全文搜索引擎,虽然性能比不上sphinx、xapian、Elasticsearc等,但是无二进制包,程序不会莫名其妙的崩溃,对于小型的站点,whoosh已经足够使用
  • jieba:一款免费的中文分词包,如果觉得不好用可以使用一些收费产品

操作

1.在虚拟环境中依次安装包


  
  1. pip install django-haystack
  2. pip install whoosh
  3. pip install jieba

2.修改settings.py文件

  • 添加应用

  
  1. INSTALLED_APPS = (
  2. ...
  3. 'haystack',
  4. )
  • 添加搜索引擎

  
  1. HAYSTACK_CONNECTIONS = {
  2. 'default': {
  3. 'ENGINE': 'haystack.backends.whoosh_cn_backend.WhooshEngine',
  4. 'PATH': os.path.join(BASE_DIR, 'whoosh_index'),
  5. }
  6. }
  7. #自动生成索引
  8. HAYSTACK_SIGNAL_PROCESSOR = 'haystack.signals.RealtimeSignalProcessor'

3.在项目的urls.py中添加url


  
  1. urlpatterns = [
  2. ...
  3. url(r'^search/', include('haystack.urls')),
  4. ]

4.在应用目录下建立search_indexes.py文件


  
  1. # coding=utf-8
  2. from haystack import indexes
  3. from models import GoodsInfo
  4. class GoodsInfoIndex(indexes.SearchIndex, indexes.Indexable):
  5. text = indexes.CharField(document=True, use_template=True)
  6. def get_model(self):
  7. return GoodsInfo
  8. def index_queryset(self, using=None):
  9. return self.get_model().objects.all()

5.在目录“templates/search/indexes/应用名称/”下创建“模型类名称_text.txt”文件


  
  1. #goodsinfo_text.txt,这里列出了要对哪些列的内容进行检索
  2. {{ object.gName }}
  3. {{ object.gSubName }}
  4. {{ object.gDes }}

6.在目录“templates/search/”下建立search.html


  
  1. <!DOCTYPE html>
  2. <html>
  3. <head>
  4. <title></title>
  5. </head>
  6. <body>
  7. {% if query %}
  8. <h3>搜索结果如下:</h3>
  9. {% for result in page.object_list %}
  10. <a href="/{{ result.object.id }}/">{{ result.object.gName }}</a><br/>
  11. {% empty %}
  12. <p>啥也没找到</p>
  13. {% endfor %}
  14. {% if page.has_previous or page.has_next %}
  15. <div>
  16. {% if page.has_previous %}<a href="?q={{ query }}&amp;page={{ page.previous_page_number }}">{% endif %}&laquo; 上一页{% if page.has_previous %}</a>{% endif %}
  17. |
  18. {% if page.has_next %}<a href="?q={{ query }}&amp;page={{ page.next_page_number }}">{% endif %}下一页 &raquo;{% if page.has_next %}</a>{% endif %}
  19. </div>
  20. {% endif %}
  21. {% endif %}
  22. </body>
  23. </html>

7.建立ChineseAnalyzer.py文件

  • 保存在haystack的安装文件夹下,路径如“/home/python/.virtualenvs/django_py2/lib/python2.7/site-packages/haystack/backends”

  
  1. import jieba
  2. from whoosh.analysis import Tokenizer, Token
  3. class ChineseTokenizer(Tokenizer):
  4. def __call__(self, value, positions=False, chars=False,
  5. keeporiginal=False, removestops=True,
  6. start_pos=0, start_char=0, mode='', **kwargs):
  7. t = Token(positions, chars, removestops=removestops, mode=mode,
  8. **kwargs)
  9. seglist = jieba.cut(value, cut_all=True)
  10. for w in seglist:
  11. t.original = t.text = w
  12. t.boost = 1.0
  13. if positions:
  14. t.pos = start_pos + value.find(w)
  15. if chars:
  16. t.startchar = start_char + value.find(w)
  17. t.endchar = start_char + value.find(w) + len(w)
  18. yield t
  19. def ChineseAnalyzer():
  20. return ChineseTokenizer()

8.复制whoosh_backend.py文件,改名为whoosh_cn_backend.py

  • 注意:复制出来的文件名,末尾会有一个空格,记得要删除这个空格

  
  1. from .ChineseAnalyzer import ChineseAnalyzer
  2. 查找
  3. analyzer=StemmingAnalyzer()
  4. 改为
  5. analyzer=ChineseAnalyzer()

9.生成索引

  • 初始化索引数据
python manage.py rebuild_index

 

10.在模板中创建搜索栏


  
  1. <form method='get' action="/search/" target="_blank">
  2. <input type="text" name="q">
  3. <input type="submit" value="查询">
  4. </form>

文章来源: lansonli.blog.csdn.net,作者:Lansonli,版权归原作者所有,如需转载,请联系作者。

原文链接:lansonli.blog.csdn.net/article/details/102651686

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。