`

Solr安装及集成javaWeb

    博客分类:
  • solr
阅读更多

1.下载solr-4.7.1

http://www.apache.org/dyn/closer.cgi/lucene/solr/4.7.1

环境需求:java 1.6版本以上;solr运行需要java serverlet 容器,默认使用jetty,或者tomcat,jboss等等。

2.Tomcat部署solr:

1. 安装好jdk 1.6以上(我用是jdk 1.7.0_15)安装好tomcat(我用是apache-tomcat-7.0.6),并配置环境变量。

2. 将解压包中的solr-4.7.1/dist/solr-4.7.1.war复制到tomcat_dir/webapps/目录,并命名为solr.war。

3.  将solr-4.7.1/example/lib/ext/目录下的jar文件复制到tomcat/lib目录下,将solr-4.7.1/example/resources/下的log4j.properties文件复制到tomcat_dir/lib目录下;

切把 solr-4.7.1/example/solr,复制到tomcat_dir/bin下。

 

 4.修改tomcat_dir/conf/server.xml

1
2
3
4
 <Connector port="8080" protocol="HTTP/1.1"
               connectionTimeout="20000"
               redirectPort="8443" 
               URIEncoding="UTF-8" />

5.创建solr.xml,存放在路径:tomcat/conf/Catalina/localhost/solr.xml,内容:

1
2
3
4
<Context path="/solr" docBase="F:\Tomcat 7.0\webapps\solr.war"
         debug="0" crossContext="true">
  <Environment name="solr/home" type="java.lang.String" value="FF:\Tomcat 7.0\bin\solr\" override="true" />
</Context>

 注意:上面的docBase和value路径中不能存在中文字符,否则会出现404错误。

 此时若安装及配置都正确,在浏览器中输入:http://127.0.0.1:9000/solr/,会出现Solr的管理界面:

 

 

6.将F:\Tomcat 7.0\webapps下的solr.war包,启动项目解压;然后再添加几个jar包:

    solr-4.7.1\dist\solr-dataimporthandler-4.7.1.jar;

    solr-4.7.1\dist\solr-dataimporthandler-extras-4.7.1.jar;

    还要加载数据库驱动包:mysql-connector-java-3.1.13-bin.jar

7、在F:\Tomcat 7.0\bin\solr\collection1\conf 下的solrconfig.xml增加以下数据库配置:

1
2
3
4
5
<requestHandler name="/dataimport" class="org.apache.solr.handler.dataimport.DataImportHandler">     
   <lst name="defaults">     
     <str name="config">data-config.xml</str>     
   </lst>     
  </requestHandler>

8.将tomcat\bin\solr\collection1\conf下增加data-config.xml文件,内容如下:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
<dataConfig>  
    <dataSource type="JdbcDataSource"  
   driver="com.mysql.jdbc.Driver"  
   url="jdbc:mysql://192.168.1.221:3306/tmsdb"  
   user="root"  
   password="123456"/>  
    <document name="content">  
        <entity name="node" query="select id,author,title,content from solrdb">  
            <field column="id" name="id" />  
            <field column="author" name="author" />  
            <field column="title" name="title" />  
            <field column="content" name="content" />
        </entity>  
    </document>  
</dataConfig>

9.增加中文分词器,ik-analyzer的配置如下:

目前的中文分词主要有两种 
    1,基于中科院ICTCLAS的隐式马尔科夫hhmm算法的中文分词器,例如smartcn等。(不支持自定义扩展词库) 
    2,基于正向迭代最细粒度切分算法(正向最大匹配并且最细分词)例如IK,庖丁等(支持自定义扩展词库) 

安装分词前,可以去下载IK的分词包 :

1
IK-Analyzer-4.7.1-0.0.1-SNAPSHOT.jar

下载完毕后,将此包放进tomcat\solr的\WEB-INF\lib下面:tomcat\webapps\solr\WEB-INF\lib  。

下面需要在solr的schemal.xml进行分词器注册:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
<!--  配置IK分词器 -->  
    <fieldType name="text_ik" class="solr.TextField" positionIncrementGap="100">  
      <analyzer type="index">  
      <!--  分词-->  
        <tokenizer class="org.wltea.analyzer.lucene.IKTokenizerFactory"/>  
         <!--   禁用词过滤根据情况使用-->  
        <!-- <filter class="org.wltea.analyzer.lucene.IKStopFilterFactory"/> -->  
      </analyzer>  
      <analyzer type="query">  
       <!--  分词-->  
        <tokenizer class="org.wltea.analyzer.lucene.IKTokenizerFactory"/>  
        <!--   禁用词过滤根据情况使用-->  
        <!-- <filter class="org.wltea.analyzer.lucene.IKStopFilterFactory"/>-->  
      </analyzer>  
    </fieldType>

最后还得配置一个引用字段就OK了

1
 <field name="ik" type="text_ik" indexed="true" stored="true" multiValued="true"/>

②它的安装部署十分简单,将IKAnalyzer2012.jar部署亍项目的lib目录中;IKAnalyzer.cfg.xml不stopword.dic文件放置在class根目录(对于web项目,通常是WEB-I NF/classes目彔,同hibernate、log4j等配置文件相同)下即可 ;然后配置solr4.7中schema.xml配置解析器:

1
2
3
4
5
6
7
<schema name="example" version="1.1"
    …… 
    <fieldType name="text" class="solr.TextField"
        <analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/> 
    </fieldType>
    …… 
</schema>

10. solr schema.xml配置总结

    schema.xml 在solr/conf/目录下,类似于数据表配置文件。

为了改进性能,可以采取以下几种措施:

①.   将所有只用于搜索的,而不需要作为查询结果的field(特别是一些比较大的field)的stored设置为false。

②.   将不需要被用于搜索的,而只是作为查询结果返回的field的indexed设置为false。 

③.   删除所有不必要的copyField声明,根据需要决定是否进行存储。

④.   为了索引字段的最小化和搜索的效率,将所有的 text fields的index都设置成false,然后使用copyField将他们都复制到一个总的 text field上,然后对他进行搜索。

⑤.   使用尽可能高的Log输出等级,减少日志量。可以在solr/admin 中的 LOGGING 进行设置。

    特珠说明:

    1.   高亮是基于分词的,所有存储需要高亮显示的字段 一定要分词(text)才能高亮显示。

    2.   排序字段 是不能当  查询过滤的条件。

文本主要配置项:

    ①.   field 类型定义

          重点是中文分词的添加 

    ②.   field 各属性定义

          name     type类型   indexed是否建立索引  stored是否存储 required 是否必填项 multiValued多值存储

    ③.   唯一key

         <uniqueKey>id</uniqueKey>

         文档的唯一标识, 必须填写这个field(除非该field被标记required="false"),否则solr建立索引报错。

    ④.   默认搜索字段 field

         <defaultSearchField>text</defaultSearchField>

         如果搜索参数中没有指定具体的field,那么这个做为默认的域。

    ⑤.   搜索参数短语间逻辑

         <solrQueryParser defaultOperator="OR"/>

          配置搜索参数短语间的逻辑,可以是"AND|OR"。

          备注: AND是交集,OR是并集

    ⑥.  复制字段

         <copyField source="content" dest="text"/>

         将多个字段的值 复制至 一个字段中,如果被复制的字段都设置为stored,那个这个字段务必不要设置成stored=true

    ⑦.  自定义评分器

         <similarity class="......SolrSimilarity"/>

          SolrSimilarity 是继承 DefaultSimilarity的子类,或者实现评分器接口的类。

 

解析:multiValued:是否包含多个值,如果要使用后面的copyField将其他字段放入默认搜索中就必须允许多指,否则会报:multiple values encountered for non multiValued copy field content

defaultSearchField配置默认搜索索引,copyField可以将 title、author字段添加至content默认搜索中

1
2
3
4
5
<uniqueKey>id</uniqueKey>  
 <defaultSearchField>content</defaultSearchField>  
 <solrQueryParser defaultOperator="OR"/>  
<copyField source="title" dest="content"/>  
<copyField source="author" dest="content"/>

 

分享到:
评论

相关推荐

    solr教程(配置+集成)

    Solr是一个独立的企业级应用服务器,它对外提供类似于Web-service的API接口。用户可以通过http请求,向搜索引擎服务器提交一定格式的xml文件, 生成索引;也可以通过Http Get操作提出查找请求,并得到XML格式的返回...

    javaweb开发当当网项目(未完结版)

    以上所述只是"javaweb开发当当网项目"中涉及的部分知识点,实际项目可能会涵盖更多内容,如国际化、单元测试、持续集成等。对于学习者而言,通过完成这样一个项目,可以全方位地提升Java Web开发技能。

    JavaWeb储粮害虫图像识别研究平台的设计与实现

    ### JavaWeb储粮害虫图像识别研究平台的设计与实现 #### 概述 本文介绍了一个储粮害虫图像识别研究平台的设计与实现过程。该平台旨在解决粮食存储过程中的害虫监控难题,通过图像识别技术实现对害虫的快速识别与...

    基于javaweb_SSM的虚拟资源共享平台的设计与实现毕业设计论文.doc

    SSM框架是Java Web开发中常用的一种集成框架,由Spring、Spring MVC和MyBatis三个开源框架组合而成。Spring作为核心容器,管理应用对象的生命周期和依赖注入;Spring MVC处理Web层的请求响应,提供模型-视图-控制器...

    JAVA上百实例源码以及开源项目源代码

    Calendar万年历 1个目标文件 EJB 模拟银行ATM流程及操作源代码 6个目标文件,EJB来模拟银行ATM机的流程及操作:获取系统属性,初始化JNDI,取得Home对象的引用,创建EJB对象,并将当前的计数器初始化,调用每一个...

    必看1年-本科-程序员面试简历模版

    在实际项目中,候选人展示了将理论知识应用于实践的能力,如使用Nginx和FastDFS进行静态资源管理,利用Redis进行数据分片和Session共享,结合Solr进行全文搜索,以及ActiveMQ的消息队列处理,充分体现了其对现代Web...

    java工程师简历_应聘JAVA开发工程师.doc

    2. **JavaWeb技术**: - JavaScript:基础的前端脚本语言,用于页面交互和动态效果。 - jQuery:简化JavaScript操作DOM、事件处理和动画的库。 - Ajax:实现页面无刷新的数据异步更新。 - JSP:Java服务器页面,...

    java2年工作经验简历_java简历.doc

    7. **分布式服务和中间件**:尚凌宇女士在项目中使用了Dubbo作为服务中间件,Zookeeper作为服务注册中心,这表明她对分布式服务架构有深入的理解,能够处理复杂的系统集成问题。 8. **其他技术**:她了解WebService...

    java简历模版8.docx

    4. **Servlet、JSP、JSTL、EL表达式**:这些都是JavaWeb开发的核心,用于服务器端处理和渲染动态内容。 5. **JSON、XML解析**:dom4j和Jaxb用于解析XML数据,JSON是轻量级的数据交换格式,广泛应用于前后端数据传输...

Global site tag (gtag.js) - Google Analytics