摘要:轉(zhuǎn)載說明來源添加全文搜索功能入門一使用的工具是的開源搜索框架,該框架支持搜索引擎,不用更改代碼,直接切換引擎,減少代碼量。修改如下添加修改為如下第二步在中修改引擎,如下第三步重建索引,在進行搜索中文試試吧。
一、使用的工具感覺網(wǎng)絡(luò)上關(guān)于Django全文搜索的中文文章太少,并且講的也不是很到位,就是簡單介紹了怎么配置,并沒有說這樣配置有什么用,所以依然很迷茫。所以希望我這篇文章能夠幫助到后來人。
轉(zhuǎn)載說明來源 http://tenlee2012.github.io/2...添加全文搜索功能入門/
haystack是django的開源搜索框架,該框架支持Solr, Elasticsearch, Whoosh, *Xapian*搜索引擎,不用更改代碼,直接切換引擎,減少代碼量。
搜索引擎使用Whoosh,這是一個由純Python實現(xiàn)的全文搜索引擎,沒有二進制文件等,比較小巧,配置比較簡單,當然性能自然略低。
中文分詞Jieba,由于Whoosh自帶的是英文分詞,對中文的分詞支持不是太好,故用jieba替換whoosh的分詞組件。
其他:Python 3.4.4, Django 1.8.3,Debian 4.2.6_3
二、配置說明現(xiàn)在假設(shè)我們的項目叫做Project,有一個myapp的app,簡略的目錄結(jié)構(gòu)如下。
- Project - Project - settings.py - blog - models.py
此models.py的內(nèi)容假設(shè)如下:
from django.db import models from django.contrib.auth.models import User class Note(models.Model): user = models.ForeignKey(User) pub_date = models.DateTimeField() title = models.CharField(max_length=200) body = models.TextField() def __str__(self): return self.title
1. 首先安裝各工具
pip install whoosh django-haystack jieba
配置Django項目的settings.py里面的 INSTALLED_APPS添加Haystack,例子:
INSTALLED_APPS = [ "django.contrib.admin", "django.contrib.auth", "django.contrib.contenttypes", "django.contrib.sessions", "django.contrib.sites", # Added. haystack先添加, "haystack", # Then your usual apps... 自己的app要寫在haystakc后面 "blog", ]
點我看英文原版
本教程使用的是Whoosh,故配置如下:
import os HAYSTACK_CONNECTIONS = { "default": { "ENGINE": "haystack.backends.whoosh_backend.WhooshEngine", "PATH": os.path.join(os.path.dirname(__file__), "whoosh_index"), }, }
其中顧名思義,ENGINE為使用的引擎必須要有,如果引擎是Whoosh,則PATH必須要填寫,其為Whoosh 索引文件的存放文件夾。
其他引擎的配置見官方文檔
如果你想針對某個app例如mainapp做全文檢索,則必須在mainapp的目錄下面建立search_indexes.py文件,文件名不能修改。內(nèi)容如下:
import datetime from haystack import indexes from myapp.models import Note class NoteIndex(indexes.SearchIndex, indexes.Indexable): text = indexes.CharField(document=True, use_template=True) author = indexes.CharField(model_attr="user") pub_date = indexes.DateTimeField(model_attr="pub_date") def get_model(self): return Note def index_queryset(self, using=None): """Used when the entire index for model is updated.""" return self.get_model().objects.filter(pub_date__lte=datetime.datetime.now())
每個索引里面必須有且只能有一個字段為document=True,這代表haystack 和搜索引擎將使用此字段的內(nèi)容作為索引進行檢索(primary field)。其他的字段只是附屬的屬性,方便調(diào)用,并不作為檢索數(shù)據(jù)。
注意:如果使用一個字段設(shè)置了document=True,則一般約定此字段名為text,這是在SearchIndex類里面一貫的命名,以防止后臺混亂,當然名字你也可以隨便改,不過不建議改。
并且,haystack提供了use_template=True在text字段,這樣就允許我們使用數(shù)據(jù)模板去建立搜索引擎索引的文件,使用方便(官方推薦,當然還有其他復雜的建立索引文件的方式,目前我還不知道),數(shù)據(jù)模板的路徑為yourapp/templates/search/indexes/yourapp/note_text.txt,例如本例子為blog/templates/search/indexes/blog/note_text.txt文件名必須為要索引的類名_text.txt,其內(nèi)容為
{{ object.title }} {{ object.user.get_full_name }} {{ object.body }}
這個數(shù)據(jù)模板的作用是對Note.title, Note.user.get_full_name,Note.body這三個字段建立索引,當檢索的時候會對這三個字段做全文檢索匹配。
在urls.py中配置如下url信息,當然url路由可以隨意寫。
(r"^search/", include("haystack.urls")),
其實haystack.urls的內(nèi)容為,
from django.conf.urls import url from haystack.views import SearchView urlpatterns = [ url(r"^$", SearchView(), name="haystack_search"), ]
SearchView()視圖函數(shù)默認使用的html模板為當前app目錄下,路徑為myapp/templates/search/search.html
所以需要在blog/templates/search/下添加search.html文件,內(nèi)容為
{% extends "base.html" %} {% block content %}Search
? |
No results found.
{% endfor %} {% if page.has_previous or page.has_next %}很明顯,它自帶了分頁。
使用python manage.py rebuild_index或者使用update_index命令。
好,下面運行項目,進入該url搜索一下試試吧。
三、下面要做的,使用jieba分詞將文件whoosh_backend.py(該文件路徑為python路徑/lib/python3.4/site-packages/haystack/backends/whoosh_backend.py
)拷貝到app下面,并重命名為whoosh_cn_backend.py,例如blog/whoosh_cn_backend.py。修改如下
添加from jieba.analyse import ChineseAnalyzer
修改為如下
schema_fields[field_class.index_fieldname] = TEXT(stored=True, analyzer=ChineseAnalyzer(), field_boost=field_class.boost)
在settings.py中修改引擎,如下
import os HAYSTACK_CONNECTIONS = { "default": { "ENGINE": "blog.whoosh_cn_backend.WhooshEngine", "PATH": os.path.join(BASE_DIR, "whoosh_index" }, }
重建索引,在進行搜索中文試試吧。
如果沒有索引自動更新,那么每當有新數(shù)據(jù)添加到數(shù)據(jù)庫,就要手動執(zhí)行update_index命令是不科學的。自動更新索引的最簡單方法在
settings.py添加一個信號。
HAYSTACK_SIGNAL_PROCESSOR = "haystack.signals.RealtimeSignalProcessor"
官方文檔
看了這入門篇,你現(xiàn)在應該大概能配置一個簡單的全文搜索了吧,如果想自定義怎么辦? 建議閱讀官方文檔和github的源碼。
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://specialneedsforspecialkids.com/yun/38108.html
摘要:搜索引擎使用,是一個純實現(xiàn)的全文搜索引擎,小巧簡單。中文搜索需要進行中文分詞,使用。高亮部分的源碼位于和文件中,可復制進行修改,實現(xiàn)自定義高亮功能。 前言 django是python語言的一個web框架,功能強大。配合一些插件可為web網(wǎng)站很方便地添加搜索功能。 搜索引擎使用whoosh,是一個純python實現(xiàn)的全文搜索引擎,小巧簡單。 中文搜索需要進行中文分詞,使用jieba。 直...
摘要:前言羅子雄如何成為一名優(yōu)秀設(shè)計師董明偉工程師的入門和進階董明偉基于自己實踐講的知乎為新人提供了很多實用建議,他推薦的羅子雄如何成為一名優(yōu)秀設(shè)計師的演講講的非常好,總結(jié)了設(shè)計師從入門到提高的優(yōu)秀實踐。 前言 羅子雄:如何成為一名優(yōu)秀設(shè)計師 董明偉:Python 工程師的入門和進階 董明偉基于自己實踐講的知乎live為Python新人提供了很多實用建議,他推薦的羅子雄:如何成為一名優(yōu)秀...
摘要:語法支持再次打開文件,在文件的最后添加指明了使用語法標記,做了兩個拓展,其中表示支持語法高亮,包含的特性請參見相關(guān)文檔。語法高亮支持注意這一步必須在安裝完主題之后。 目前網(wǎng)上搭建個人博客的方案很多,雖然使用諸如 Wordpress ( PHP )、Hexo ( Node.js ) 等可以方便快速地搭建一款功能齊全的高性能個人博客,但是本文將嘗試一種更為小眾化的方案 —— 一款基于 dj...
摘要:首先,在學習之前一定會考慮一個問題版本選擇對于編程零基礎(chǔ)的人來說,選擇。建議從下面課程開始教程標準庫官方文檔非常貼心地提供中文翻譯首先需要學習的基礎(chǔ)知識,下載安裝導入庫字符串處理函數(shù)使用等等。 提前說一下,這篇福利多多,別的不說,直接讓你玩回最有手感的懷舊游戲,參數(shù)貼圖很方便自己可以根據(jù)喜好修改哦。 本篇通過以下四塊展開,提供大量資源對應。 showImg(https://segmen...
閱讀 2655·2021-11-24 10:44
閱讀 1895·2021-11-22 13:53
閱讀 1907·2021-09-30 09:47
閱讀 3704·2021-09-22 16:00
閱讀 2431·2021-09-08 09:36
閱讀 2312·2019-08-30 15:53
閱讀 2789·2019-08-30 15:48
閱讀 976·2019-08-30 15:44