coreseek+sphinx+mysql+thinkphp整合

Posted 2020-08-16 Timothy_lai

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了coreseek+sphinx+mysql+thinkphp整合相关的知识，希望对你有一定的参考价值。

1、安装coreseek

　　1.1首先升级或安装系统依赖库　　

yum install make gcc g++ automake libtool mysql-client libmysqlclient15-dev libxml2-dev libexpat1-dev

　　1.2下载Coreseek3.2.14

　　　　解压：tar zxvf coreseek-3.2.14.tar.gz

　　　　cd coreseek-3.2.14

　　　　cd mmseg-3.2.14 #在安装前首先安装mmseg插件

　　　　./configure --prefix=/Data/apps/mmseg3

　　　　如果报如下错误

　　　　config.status: creating Makefile

　　　　config.status: creating src/Makefile

　　　　config.status: error: cannot find input file: src/Makefile.in

　　　　通过安装autoconf和automake解决

　　　　yum -y install autoconf automake

　　　　aclocal

　　　　configure.in:26: warning: macro `AM_PROG_LIBTOOL‘ not found in library

　　　　yum -y install libtool

　　　　aclocal

　　　　libtoolize --force

　　　　libtoolize: putting auxiliary files in AC_CONFIG_AUX_DIR, `config‘.
　　　　libtoolize: linking file `config/ltmain.sh‘
　　　　libtoolize: Consider adding `AC_CONFIG_MACRO_DIR([m4])‘ to configure.in and
　　　　libtoolize: rerunning libtoolize, to keep the correct libtool macros in-tree.
　　　　libtoolize: Consider adding `-I m4‘ to ACLOCAL_AMFLAGS in Makefile.am.

　　　　automake --add-missing

　　　　autoconf

　　　　autoheader

　　　　make clean

　　　　完成上面操作，重新配置即可

       ./configure --prefix=/Data/apps/mmseg3

　　　　------------------------------------------------------------------------
　　　　Configuration:

　　　　Source code location: .
　　　　Compiler: gcc
　　　　Compiler flags: -g -O2
　　　　Host System Type: x86_64-redhat-linux-gnu
　　　　Install path: /Data/apps/mmseg3

　　　　See config.h for further configuration information.
　　　　------------------------------------------------------------------------

　　　　安装mmseg

　　　　make && make install

　　　　test -z "/Data/apps/mmseg3/etc" || /bin/mkdir -p "/Data/apps/mmseg3/etc"
　　　　/usr/bin/install -c data/unigram.txt data/uni.lib data/mmseg.ini 　　　　‘/Data/apps/mmseg3/etc‘
　　　　make[2]: Leaving directory `/Data/tgz/coreseek-3.2.14/mmseg-3.2.14‘
　　　　make[1]: Leaving directory `/Data/tgz/coreseek-3.2.14/mmseg-3.2.14‘

　　1.3安装完mmseg中文分词插件后，就可以安装Coreseek3.2.14了

ln -s /Data/apps/mmseg3/bin/mmseg /bin/mmseg

　　　　cd ..

　　　　cd csft-3.2.14/

　　　　./configure --prefix=/Data/apps/coreseek --without-unixodbc --with-mmseg-includes=/Data/apps/mmseg3/include/mmseg/ --with-mmseg-libs=/Data/apps/mmseg3/lib/ --with-mysql

　　　　make && make install

　　　　通过以上步骤，mmseg和Coreseek3.2.14就安装完成，通过ls命令查看安装后的目录及文件

[[email protected] csft-3.2.14]# ls /Data/apps/coreseek/

　　　　bin etc var

2、检测Coreseek中文分词

1、cd /Data/tgz/coreseek-3.2.14/testpack/

　　2、/Data/apps/mmseg3/bin/mmseg -d /Data/apps/mmseg3/etc var/test/test.xml

　　3、/Data/apps/coreseek/bin/indexer -c etc/csft.conf --all，如果报错

　　Unigram dictionary load Error，修改:/Data/tgz/coreseek-3.2.14/testpack/etc/csft.conf中的charset_dictpath = var/mmseg3/etc/路径为：charset_dictpath = /Data/apps/mmseg3/etc/即可

　　4、/Data/apps/coreseek/bin/search -c etc/csft.conf 网络搜索，报错如下

　　index ‘xml‘: search error: failed to open var/data/xml.sph: No such file or directory.

　　解决如下：

　　yum install expat-devel* 然后重新安装sphinx/coreseek 即可

　　重新执行命令：/Data/apps/coreseek/bin/search -c etc/csft.conf 网络搜索

Coreseek Fulltext 3.2 [ Sphinx 0.9.9-release (r2117)]
　　Copyright (c) 2007-2011,
　　Beijing Choice Software Technologies Inc (http://www.coreseek.com)

　　using config file ‘etc/csft.conf‘...
　　index ‘xml‘: query ‘网络搜索 ‘: returned 1 matches of 1 total in 0.010 sec

　　displaying matches:
　　1. document=1, weight=1, published=Thu Apr 1 15:20:07 2010, author_id=1

　　words:
　　1. ‘网络‘: 1 documents, 1 hits
　　2. ‘搜索‘: 2 documents, 5 hits

3、配置coreseek并使用

　　3.1、把实例配置复制到安装coreseek的etc目录下

cp /Data/tgz/coreseek-3.2.14/testpack/etc/csft_mysql.conf /Data/apps/coreseek/etc/csft_mysql.conf

　　3.2、修改配置文件

vim /Data/apps/coreseek/etc/csft_mysql.conf

source mysql
{
    type                    = mysql

    sql_host                = localhost
    sql_user                = test
    sql_pass                = root
    sql_db                    = kp_account
    sql_port                = 3306
    sql_query_pre            = SET NAMES utf8

    sql_query                = SELECT goods_id, goods_id as gid, goods_name, add_time FROM fc_goods
                                                              #sql_query第一列id需为整数
                                                              #title、content作为字符串/文本字段，被全文索引
    sql_attr_uint            = gid           #从SQL读取到的值必须为整数
    sql_attr_timestamp        = add_time #从SQL读取到的值必须为整数，作为时间属性

    sql_query_info_pre      = SET NAMES utf8                                        #命令行查询时，设置正确的字符集
    sql_query_info            = SELECT * FROM documents WHERE id=$id #命令行查询时，从数据库读取原始数据信息
}

#index定义
index mysql
{
    source            = mysql             #对应的source名称
    path            = /Data/apps/coreseek/var/data/mysql #请修改为实际使用的绝对路径，例如：/usr/local/coreseek/var/...
    docinfo            = extern
    mlock            = 0
    morphology        = none
    min_word_len        = 1
    html_strip                = 0

    #中文分词配置，详情请查看：http://www.coreseek.cn/products-install/coreseek_mmseg/
    #charset_dictpath = /usr/local/mmseg3/etc/ #BSD、Linux环境下设置，/符号结尾
    charset_dictpath = /Data/apps/mmseg3/etc/
    #charset_dictpath = etc/                             #Windows环境下设置，/符号结尾，最好给出绝对路径，例如：C:/usr/local/coreseek/etc/...
    charset_type        = zh_cn.utf-8
}

#全局index定义
indexer
{
    mem_limit            = 128M
}

#searchd服务定义
searchd
{
    listen                  =   9312
    read_timeout        = 5
    max_children        = 30
    max_matches            = 1000
    seamless_rotate        = 0
    preopen_indexes        = 0
    unlink_old            = 1
    pid_file = /Data/apps/coreseek/var/log/searchd_mysql.pid  #请修改为实际使用的绝对路径，例如：/usr/local/coreseek/var/...
    log = /Data/apps/coreseek/var/log/searchd_mysql.log        #请修改为实际使用的绝对路径，例如：/usr/local/coreseek/var/...
    query_log = /Data/apps/coreseek/var/log/query_mysql.log #请修改为实际使用的绝对路径，例如：/usr/local/coreseek/var/...
}

　　保存

　　3.3、建立索引

/Data/apps/coreseek/bin/indexer -c /Data/apps/coreseek/etc/csft_mysql.conf --all

　　创建成功后提示

Coreseek Fulltext 3.2 [ Sphinx 0.9.9-release (r2117)]
Copyright (c) 2007-2011,
Beijing Choice Software Technologies Inc (http://www.coreseek.com)

 using config file ‘/Data/apps/coreseek/etc/csft_mysql.conf‘...
indexing index ‘mysql‘...
collected 811 docs, 0.0 MB
sorted 0.0 Mhits, 100.0% done
total 811 docs, 15729 bytes
total 0.072 sec, 217260 bytes/sec, 11202.12 docs/sec
total 2 reads, 0.000 sec, 14.2 kb/call avg, 0.0 msec/call avg
total 7 writes, 0.000 sec, 10.3 kb/call avg, 0.0 msec/call avg

　　3.4、启动服务

/Data/apps/coreseek/bin/searchd -c /Data/apps/coreseek/etc/csft_mysql.conf

4、使用sphinx有两种方法，一种是安装php的sphinx扩展，第二种是使用sphinx的接口，这里直接使用sphinx接口

　　4.1、把sphinxapi.php文件复制到项目目录

cp api/sphinxapi.php /Data/apps/nginx/html/sphinx/

　　4.2、php调用sphinx接口进行搜索

<?php
        require("sphinxapi.php");
        $sphinx = new SphinxClient();
        $sphinx->setServer("127.0.0.1", 9312);
        $keyword = $_GET[‘keyword‘] ? $_GET[‘keyword‘] : ‘轮胎‘;
        $res = $sphinx->query($keyword, ‘mysql‘);
        print_r($res);

　　运行结果：

　　小结：到此，就已经基本整合到php当中了，接下来就整合到ThinkPHP中去。

以上是关于coreseek+sphinx+mysql+thinkphp整合的主要内容，如果未能解决你的问题，请参考以下文章

coreseek(sphinx)安装2(mysql数据源配置和测试)

coreseek (sphinx)+ Mysql + Thinkphp搭建中文搜索引擎详解

整理Linux下中文检索引擎coreseek4安装，以及PHP使用sphinx的三种方式(sphinxapi，sphinx的php扩展，SphinxSe作为mysql存储引擎)

全文搜索引擎coreseek安装配置(sphinx)

coreseek安装过程

coreseek