1、什麼是Sphinx
Sphinx 是一個在GPLv2 下發布的一個全文檢索引擎，商業授權（例如, 嵌入到其他程式中）
需要聯絡我們（Sphinxsearch.com）以獲得商業授權。
一般而言，Sphinx是一個獨立的搜尋引擎，意圖為其他應用提供高速、低空間佔用、高結果
相關度的全文搜尋功能。Sphinx可以非常容易的與SQL資料庫和指令碼語言整合。
當前系統內建MySQL和PostgreSQL 資料庫資料來源的支援，也支援從標準輸入讀取特定格式
的XML資料。通過修改原始碼，使用者可以自行增加新的資料來源（例如：其他型別的DBMS
的原生支援）。
搜尋API支援PHP、Python、Perl、Rudy和Java，並且也可以用作MySQL儲存引擎。搜尋
API非常簡單，可以在若干個小時之內移植到新的語言上。
Sphinx 是SQL Phrase Index的縮寫，但不幸的和CMU的Sphinx專案重名

2、Sphinx的特性

高速的建立索引(在當代CPU上，峰值效能可達到10 MB/秒);



高效能的搜尋(在2 – 4GB 的文字資料上，平均每次檢索響應時間小於0.1秒);



可處理海量資料(目前已知可以處理超過100 GB的文字資料, 在單一CPU的系統上可
處理100 M 文件);



提供了優秀的相關度演算法，基於短語相似度和統計（BM25）的複合Ranking方法;



支援分散式搜尋;



provides document exceprts generation;



可作為MySQL的儲存引擎提供搜尋服務;



支援布林、短語、詞語相似度等多種檢索模式;



文件支援多個全文檢索欄位(最大不超過32個);



文件支援多個額外的屬性資訊(例如：分組資訊，時間戳等);



停止詞查詢;



支援單一位元組編碼和UTF-8編碼;



原生的MySQL支援(同時支援MyISAM 和InnoDB );



原生的PostgreSQL 支援.

一、安裝所需檔案mmseg-0.7.3.tar.gz 中文分詞
http://www.coreseek.com/uploads/sources/mmseg-0.7.3.tar.gz

mysql-5.1.26-rc.tar.gz mysql-5.1.26原始碼

sphinx-0.9.8-rc2.tar.gz sphinx-0.9.8-rc2原始碼

http://www.sphinxsearch.com/downloads/sphinx-0.9.8-rc2.tar.gzmmseg Coreseek COS(tm) MM Segment 1.0 Copyright By Coreseek.com All Right Reserved. Usage: mmseg <option> <file> -u <unidict> Unigram Dictionary -r Combine with -u, used a plain text build Unigram Dictionary, default Off -b <Synonyms> Synonyms Dictionary -h print this help and exit

二、開始安裝
1.安裝libmmseg

安裝mmseg完成,測試一下

 tar -zxvf mmseg-0.7.3.tar.gz cd mmseg-0.7.3 ./configure --prefix=/usr/local/mmseg make make install cd ..

有問題可以嘗試執行下面命令

echo '/usr/local/mmseg/lib' >> /etc/ld.so.conf ldconfig -v ln -s /usr/local/mmseg/bin/mmseg /bin/mmseg

2.重新編譯mysql
在安裝之前先打兩個補丁,這個是支援中文必須打的補丁

tar -zxvf sphinx-0.9.8-rc2.tar.gz cd sphinx-0.9.8 patch -p1 < ../sphinx-0.98rc2.zhcn-support.patch patch -p1 < ../fix-crash-in-excerpts.patch

3.安裝sphinx

cd /root/lemp/sphinx-0.9.8-rc2 ./configure --prefix=/usr/local/sphinx --with-mysql=/opt/mysql / --with-mysql-includes=/opt/mysql/include/mysql --with-mysql-libs=/opt/mysql/lib/mysql / --with-mmseg-includes=/usr/local/mmseg/include --with-mmseg-libs=/usr/local/mmseg/lib --with-mmseg make

tokenizer_zhcn.cpp:1:30: SegmenterManager.h: 沒有那個檔案或目錄 tokenizer_zhcn.cpp:2:23: Segmenter.h: 沒有那個檔案或目錄

make clean ./configure --prefix=/usr/local/sphinx --with-mysql=/opt/mysql / --with-mysql-includes=/usr/local/mysql/include/mysql --with-mysql-libs=/opt/mysql/lib/mysql / --with-mmseg-includes=/usr/local/mmseg/include/mmseg --with-mmseg-libs=/usr/local/mmseg/lib --with-mmseg /root/sphinx/sphinx-0.9.8-rc2/src/tokenizer_zhcn.cpp:34: undefined reference to `libiconv_close' collect2: ld returned 1 exit status

官網解決辦法：
In the meantime I've change the configuration file and set
#define USE_LIBICONV 0 in line 8179.
修改configure 檔案把 #define USE_LIBICONV 0 最後的數值由1改為0
重新編譯。

make clean ./configure --prefix=/usr/local/sphinx --with-mysql=/opt/mysql / --with-mysql-includes=/usr/local/mysql/include/mysql --with-mysql-libs=/usr/local/mysql/lib/mysql / --with-mmseg-includes=/usr/local/mmseg/include/mmseg --with-mmseg-libs=/usr/local/mmseg/lib --with-mmseg

vi configure
輸入/define USE_LIBICONV 找到目標行
按i鍵後將1改成0,按esc,輸入:wq儲存退出

make make install  

cd /usr/local/sphinx/etc cp sphinx.conf.dist sphinx.conf 

4.配置sphinx

修改/usr/local/sphinx/etc/sphinx.conf

 type = mysql # some straightforward parameters for SQL source types sql_host = localhost sql_user = root sql_pass = sql_db = test sql_port = 3306 # optional, default is 3306 address = 127.0.0.1 #安全點可以只監聽本機

5.索引建立

裝好sphinx後在sphinx的目錄中有三個目錄 分別為bin etc var
bin中 存有sphinx用到的一些執行檔案 包括 indexer 索引建立 search 查詢工具 searchd 查詢伺服器 等

為了下面測試方便，我們先將sphinx.conf自帶的example.sql指令碼倒入的mysql中
//建立了一個test庫，並建立了documents測試表和資料

/usr/local/mysql/bin/mysql -uroot -p < /usr/local/sphinx/etc/example.sql   

索引的建立方法為

/usr/local/sphinx/bin/indexer --config /usr/local/sphinx/etc/sphinx.conf test1

test1為資源名稱 不寫為預設所有都建立索引
附:
建立索引期間可能由於不同版本的資料庫導致indexer找不到共享庫libmysqlclient.so.16
需要把/opt/mysql/lib/mysql/libmysqlclient.so.16.0.0 這個檔案複製到/usr/lib下 或者作軟連線即可

6.查詢伺服器

/usr/local/sphinx/bin/searchd --config /usr/local/sphinx/etc/sphinx.conf 為開啟

/usr/local/sphinx/bin/searchd --config /usr/local/sphinx/etc/sphinx.conf --stop 為關閉

sphinx的查詢 可以大致分為三種

1 資料庫引擎中的查詢

2 通過search工具查詢
/usr/local/sphinx/bin/search --config /usr/local/sphinx/etc/sphinx.conf test

3 通過php的介面查詢 詳見sphinxapi.php

 三、在mysql中的使用SphinxSE方式呼叫Sphinx 1.在mysql中的使用SphinxSE方式呼叫Sphinx
首先建立一張索引專用表： CREATE TABLE `sphinx` ( `id` int(11) NOT NULL, `weight` int(11) NOT NULL, `query` varchar(255) NOT NULL, `CATALOGID` INT NOT NULL, `EDITUSERID` INT NOT NULL, `HITS` INT NULL, `ADDTIME` INT NOT NULL, KEY `Query` (`Query`) ) ENGINE=SPHINX DEFAULT CHARSET=utf8 CONNECTION='sphinx://localhost:3312/test1'  

test1：索引的名稱，可以在sphinx.conf中查詢到
建立完索引專用表後，我們就可以在mysql中使用它了，例如，在mysql中輸入

SELECT doc. * FROM documents doc JOIN sphinx ON ( doc.id = sphinx.id ) WHERE query = 'doc;mode= any'

執行後，結果記錄中將會顯示包含doc字串的所用記錄行

2.中文分詞應用
生成詞典
進入到mmseg的原始碼目錄後

cd data mmseg -u unigram.txt

在data下邊會產生一個檔案unigram.txt.uni
這個就是生成的字典 然後把字典改名為uni.lib放在可以讀取的目錄中即可

cp unigram.txt.uni /usr/local/sphinx/uni.lib

修改 sphinx.conf(/usr/local/sphinx/etc/sphinx.conf)配置檔案
在索引中加入

charset_type = zh_cn.utf-8 charset_dictpath = /usr/local/sphinx/

INSERT INTO `test`.`documents` ( `id` , `group_id` , `group_id2` , `date_added` , `title` , `content` ) VALUES ( NULL , '3', '9', NOW( ) , 'sphinx中文搜尋', 'Sphinx是一個基於SQL的全文檢索引擎，可以結合MySQL,PostgreSQL做全文搜尋，它可以提供比資料庫本身更專業的搜尋功能，使得應用程式更容易實現專業化的全文檢索。Sphinx特別為一些指令碼語言設計搜尋API介面，如PHP,Python,Perl,Ruby等，同時為MySQL也設計了一個儲存引擎外掛。 ' );

(如果searchd已經再執行，先kill 它再執行)
注意：在新增完資料後，需要重新載入索引，這樣新的資料才能被快取進去
重建索引,成功後，開啟索引監聽

/usr/local/sphinx/bin/indexer --config /usr/local/sphinx/etc/sphinx.conf --all /usr/local/sphinx/bin/searchd --config /usr/local/sphinx/etc/sphinx.conf

 在ide硬碟上建索引的速度

indexing index 'test1'... collected 423228 docs, 637.2 MB sorted 125.5 Mhits, 100.0% done total 423228 docs, 637201412 bytes total 753.401 sec, 845766.13 bytes/sec, 561.76 docs/sec  

這樣，就可以在phpmyadmin中進行測試了。

SELECT doc. * FROM documents doc JOIN sphinx ON ( doc.id = sphinx.id ) WHERE query = '設計;mode= any '

好像沒出來。。。。

修改 sphinx.conf
去掉下面的註釋

sql_query_pre = SET NAMES utf8  

再重啟searchd就可以搜出結果了

使用service 控制sphinx

先增加一sphinx使用者並屬於website組(事先已存在),並修改sphinx目錄的屬主

useradd -d /usr/local/sphinx -g website -s /sbin/nologin sphinx chown -R sphinx:website /usr/local/sphinx

建立/etc/init.d/sphinx指令碼

#!/bin/sh # sphinx: Startup script for Sphinx search # # chkconfig: 345 86 14 # description: This is a daemon for high performance full text / # search of MySQL and PostgreSQL databases. / # See http://www.sphinxsearch.com/ for more info. # # processname: searchd # pidfile: $sphinxlocation/var/log/searchd.pid # Source function library. . /etc/rc.d/init.d/functions processname=searchd servicename=sphinx username=sphinx sphinxlocation=/usr/local/sphinx pidfile=$sphinxlocation/var/log/searchd.pid searchd=$sphinxlocation/bin/searchd RETVAL=0 PATH=$PATH:$sphinxlocation/bin start() { echo -n $"Starting Sphinx daemon: " daemon --user=$username --check $servicename $processname RETVAL=$? echo [ $RETVAL -eq 0 ] && touch /var/lock/subsys/$servicename } stop() { echo -n $"Stopping Sphinx daemon: " $searchd --stop #killproc -p $pidfile $servicename -TERM RETVAL=$? echo if [ $RETVAL -eq 0 ]; then rm -f /var/lock/subsys/$servicename rm -f $pidfile fi } # See how we were called. case "$1" in start) start ;; stop) stop ;; status) status $processname RETVAL=$? ;; restart) stop sleep 3 start ;; condrestart) if [ -f /var/lock/subsys/$servicename ]; then stop sleep 3 start fi ;; *) echo $"Usage: $0 {start|stop|status|restart|condrestart}" ;; esac exit $RETVAL

修改許可權並加入到service,機器啟動時自動啟動

chmod 755 /etc/init.d/sphinx chkconfig --add sphinx chkconfig --level 345 sphinx on chkconfig --list|grep sphinx #檢查下 service sphinx start #執行 service sphinx stop #停止,官方的指令碼在我的as4上有點問題，所以粗魯的改了下 service sphinx restart #重啟 service sphinx status #檢視是否執行 #檢查下已用sphinx使用者執行 ps aux |grep searchd sphinx 24612 0.0 0.3 11376 6256 pts/1 S 14:07 0:00 searchd