Solr(一)solr的介绍、linux安装、使用

solr是什么?

        solr是Apache下的一个顶级开源项目,采用Java开发,它是基于Lucene(是一个开放源代码的全文检索引擎工具包)的全文搜索服务器。Solr提供了比Lucene更为丰富的查询语言,同时实现了可配置、可扩展,并对索引、搜索性能进行了优化。

solr的工作方式

    文档通过Http利用XML /JSON加到一个搜索集合中。Solr查询该集合也是通过http收到一个XML/JSON响应来实现。它的主要特性包括:高效、灵活的缓存功能,垂直搜索功能,高亮显示搜索结果,通过索引复制来提高可用性,提供一套强大Data Schema来定义字段,类型和设置文本分析,提供基于Web的管理界面等。

solr的服务原理

    Solr对外提供标准的http接口来实现对数据的索引的增加、删除、修改、查询。
  在Solr中,用户通过向部署在servlet 容器中的Solr Web应用程序发送 HTTP 请求来启动索引和搜索。
  Solr接受请求,确定要使用的适当SolrRequestHandler,然后处理请求。通过 HTTP 以同样的方式返回响应。
  默认配置返回Solr的标准 XML 响应,也可以配置Solr的备用响应格式。


solr的安装及配置

solr的版本:4.10.3   (下载链接:点击打开链接

LinuxJdk1.7/8tomcat7

安装solr

第一步:创建/home/solr 目录

[root@solr home]# mkdir solr

第二步:安装tomcat,把tomcat解压到/home/solr/tomcat

[root@solr ~]# tar -zxvf apache-tomcat-7.0.81.tar.gz -C /home/solr/tomcat

 

第三步:把solr的压缩包上传到服务器。并解压到~/training/目录下(解压的目录可自己定义)

[root@solr ~]# tar -zxvf solr-4.10.3.tgz.tgz -C training/

 

第四步:把/root/solr-4.10.3/dist/solr-4.10.3.war包部署到tomcat下。并改名为solr.war

[root@solr ~]# cp training/solr-4.10.3/dist/solr-4.10.3.war /home/solr/tomcat/webapps/solr.war

 

第五步:解压war包。启动tomcat自动解压。关闭tomcat。删除solr.war

第六步:把/root/training/solr-4.10.3/example/lib/ext 目录下所有的jar包复制到solr工程中。

[root@solr webapps]# cp /root/training/solr-4.10.3/example/lib/ext/*

/home/solr/tomcat/webapps/solr/WEB-INF/lib/

 

第六步:创建solrhomesolrhome是存放solr服务器所有配置文件的目录。

[root@solr ~]# cp -r ~/training/solr-4.10.3/example/solr /home/solr/solrhome

 

第七步:告诉solr服务器solrhome的位置。

需要修改solr工程的web.xml文件。(如果没有告诉solr服务器solrhome的位置,则打不开solr web客户端)



第八步:启动tomcat。(打不开网页的注意防火墙是否开放8080端口)

http://192.168.168.128:8080/solr

中文分析器的配置

中文分析器下载地址:点击打开链接

第一步:使用IK-Analyzer。把分析器的文件夹上传到服务器。

第二步:需要把分析器的jar包添加到solr工程中。

[root@solr ~]# cd IK\ Analyzer\ 2012FF_hf1/

[root@solr IK Analyzer 2012FF_hf1]# cp IKAnalyzer2012FF_u1.jar /home/solr/tomcat/webapps/solr/WEB-INF/lib/

 

第三步:在/home/solr/tomcat/webapps/solr/WEB-INF/创建classes目录

[root@solr IK Analyzer 2012FF_hf1]# cd /home/solr/tomcat/webapps/solr/WEB-INF/

[root@solr WEB-INF]# mkdir classes

 

第四步:需要把IKAnalyzer需要的扩展词典及停用词词典、配置文件复制到solr工程的classpathWEB-INF/classes)。

[root@solr IK Analyzer 2012FF_hf1]# cp IKAnalyzer.cfg.xml ext_stopword.dic mydict.dic /home/solr/tomcat/webapps/solr/WEB-INF/classes

 

注意:扩展词典及停用词词典的字符集必须是utf-8。不能使用windows记事本编辑。

第五步:配置fieldType。需要在solrhome/collection1/conf/schema.xml中配置。重启tomcat

技巧:使用vivim跳转到文档开头gg。跳转到文档末尾:G

<fieldType name="text_ik" class="solr.TextField">

  <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/>

</fieldType>


业务字段配置(该步骤可根据自己的业务来进行配置)

业务字段判断标准:

1、在搜索时是否需要在此字段上进行搜索。例如:商品id、商品标题、商品最早有效时间、商品最晚有效时间、商户名称、商品类型、国家名称、商户id

需要用到的字段:

1、商品id

2、商品标题

3、商品最早有效时间

4、商品最晚有效时间

5、商户名称

6、商品类型

7、国家名称

8、商户id

Solr中的业务字段:

1、id——》商品id

其他的对应字段创建solr的字段。

<field name="productId" type="int" indexed="true" stored="true"/>

<field name="productTitle" type="text_ik" indexed="true" stored="true"/>

<field name="productValidStart" type="string" indexed="false" stored="true"/>

<field name="productValidEnd"  type="string" indexed="false" stored="true"/>

<field name="merchantName" type="text_ik" indexed="true" stored="true" />

<field name="productType" type="string" indexed="false" stored="true" />

<field name="countryName" type="text_ik" indexed="true" stored="true" />

<field name="merchantId" type="long" indexed="true" stored="false" />

<field name="product_keywords" type="text_ik" indexed="true" stored="false" multiValued="true"/>

<copyField source="productTitle" dest="product_keywords"/>

<copyField source="merchantName" dest="product_keywords"/>

<copyField source="productType" dest="product_keywords"/>

<copyField source="countryName" dest="product_keywords"/>

对于上面的名词作解释:

name:solr的字段名称。

stored="false" 不存储,也就是不展示,但是可作为查询条件

type="text_ik"是中文分析器类型,可以进行分词搜索,如果是string或者long等,就不进行分词搜索。

indexed="true" 索引,可以使得一个field可以被搜索。

name="product_keywords" 关键字,把几个字段合在一起作为一个字段进行搜索这个是solr本身的一种优化。

multiValued一个field有多个值,值来自同一filed,默认是false

把以上的field业务字段配置到solrhome/collection1/conf/schema.xml中。重启tomcat

维护索引库

1、添加:添加一个json格式的文件就可以。

{

"id":1,

"productId":1,

"productTitle":"测试商品1",

"productValidStart":"2018-01-01",

"productValidEnd":"2018-08-08",

"merchantName":"携程",

"productType":"美食",

"countryName":"新加坡",

"merchantId":"10"

}



2、修改:在solr中是没有update,只需要添加一个新的文档,要求文档id和被修改文档的id一致。原理是先删除后添加。


3、删除:使用xml格式。

删除两种方法:

1、根据id删除:

<delete>

<id>1</id>

</delete>

<commit/>

2、根据查询删除:(*:*是表示所有的keyvalue 都删除)

<delete>

<query>*:*</query>

</delete>

<commit/>

到此为止,solr的简单介绍、安装和web端的简单使用就讲到这里。

后续还会继续更新solrJ(solr的java客户端)的使用以及如何配置solr集群。

此文章为原创,转载需说明原出处,谢谢。

猜你喜欢

转载自blog.csdn.net/b_evan/article/details/79657903
今日推荐