`
yangjayup
  • 浏览: 252650 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

基于solr的网站索引架构(一)

阅读更多

关于solr的介绍和参数说明等,可参与网上资料。我这里就只分享下我在项目中使用solr的一些学习心得。

版本:由于使用到 中文分词IKanalry ,是solr4.0才有的新特性,所以使用solr4.0。

solr 官方地址:http://lucene.apache.org/solr/

(备注,项目使用时solr4.0正式版本还没有出来,所有我使用的solr4.0 Beta版本)

 

IKAnalyzer 中文分词,需要IKAnalyzer4.1.jar支持,需要在solrconfig.xml中配置jar包路径

 

solr的安装:

1:准备一个tomcat作为solr的服务器,将solr解压,找到dist文件中的apache-solr-4.0.0.war,拷贝到webapps目录下。

2:任意选择一个目录作为solr/home目录,solr/home里是放置你的多个core文件(可先从example\multicore下拷贝example),建立独立搜索规则。我同时在slor/home下建立了一个lib目录,用来存放IKAnalyzer的jar包和配置文件。还有solr.xml文件,最后solr/home的结构图如下:



 core0,core1.core2.core3表示了我建立了4套不同的搜索规则。项目各不干扰。然后将4套搜索配置到solr.xml中,代码如下:

 

  <cores adminPath="/admin/cores" defaultCoreName="collection1" host="${host:}" hostPort="${jetty.port:}" zkClientTimeout="${zkClientTimeout:15000}">
    <core name="core0" instanceDir="core0" />
    <core name="core1" instanceDir="core1" />
    <core name="core2" instanceDir="core2" />
    <core name="core3" instanceDir="core3" />
  </cores>

 

如上solr/home建立完成

 

 3: 运行solr的方法

  1).在当前路径运行tomcat (索引文件在Solr.Home下推荐) 如:

    E:\solr-tomcat>E:\apache-tomcat-6.0.29\bin\startup.bat

   注意如果你不将apache-solr-1.4.1.war 拷贝到 tomcat的webapps 下。

   你也可以在E:\apache-tomcat-6.0.29\conf\server.xml 添加 <Context docBase="E:/apache-tomcat-6.0.29/webapps/solr.war" debug="0" path="/solr01" /> 

   来告诉Tomcat 你的网站在哪里

 

  2).在tomcat的conf文件夹建立Catalina文件夹,然后在Catalina文件夹中在建立localhost文件夹,在该文件夹下面建立solr.xml

    <Context docBase="D:/Tomcat7.0-solr/webapps/solr" debug="0" crossContext="true"> 

                 <Environment name="solr/home" type="java.lang.String" value="D:/Tomcat7.0-solr/solrHome" override="true"/> 

              </Context> 

    然后直接双击 startup.bat 运行Tomcat 索引文件在 %Tomcat_Home%\Bin下。

              docBase为操作步骤1的地址(当然如果,war被访问会自动解压为solr文件夹,就可以直接配置到solr目录下),Environment 的Value为步骤2中的solr/home目录。

  3).E:\apache-tomcat-6.0.29\webapps\solr\WEB-INF\Web.xml设置

    <env-entry>

      <env-entry-name>solr/home</env-entry-name>

      <env-entry-value>E:/solr-tomcat/solr</env-entry-value>

      <env-entry-type>java.lang.String</env-entry-type>

    </env-entry>

  然后直接双击 startup.bat 运行Tomcat 索引文件在 %Tomcat_Home%\Bin下

     以上操作引子网上,我使用的是方法2)。

 

从solr- -4.4.0 \example\lib\ext复制所有的jar到 apache-tomcat-7.0.42 /lib下

 

完成以上步骤后,启动tomcat访问http://192.168.1.83:8089/solr 不出意外就已经成功启动solr服务了

 

solrconfig.xml文件介绍:

由于引入了IKAnalyzer的jar包,所以在solrconfig.xml也要做配置。参考solr中的其他代码,如下配置  <lib dir="../lib/" regex=".*\.jar" /> 。

schema.xml文件介绍:

配置了索引字段和内容,会和具体业务相关。

IKAnalyzer在schema.xml中配置如下(text_cn的类型将支持中文分词):

<fieldType name="text_cn" class="solr.TextField" positionIncrementGap="100">  
        <!--<analyzer class="org.wltea.analyzer.lucene.IKAnalyzer"/> -->  
		<analyzer type="index">  
			<tokenizer class="org.wltea.analyzer.solr.IKTokenizerFactory" isMaxWordLength="false"/>  
            <filter class="solr.StopFilterFactory" ignoreCase="true" words="stopwords.txt" enablePositionIncrements="true" />  
            <filter class="solr.StandardFilterFactory"/>  
            <filter class="solr.RemoveDuplicatesTokenFilterFactory"/>  
        </analyzer>  
        <analyzer type="query">    
			<tokenizer class="org.wltea.analyzer.solr.IKTokenizerFactory" isMaxWordLength="false"/>  
			<filter class="solr.StopFilterFactory" ignoreCase="false" words="stopwords.txt" enablePositionIncrements="true" />  
            <filter class="solr.SynonymFilterFactory" synonyms="synonyms.txt" ignoreCase="true" expand="true"/>  
            <filter class="solr.StandardFilterFactory"/>  
            <filter class="solr.RemoveDuplicatesTokenFilterFactory"/>  
        </analyzer>    
	</fieldType>  

 

完成solr的安装和配置后,接下来就是solr索引的生成和solr在项目中的使用。嗯,再去梳理下,下一篇再贴出代码介绍。

 

附件为IKAnalyzer的配置

  • 大小: 9.6 KB
分享到:
评论

相关推荐

    基于Solr4.9.0的搜索系统:包括Solr索引建立、Solr索引查询DUBBO接口等内容。.zip

    总的来说,这个基于Solr4.9.0的搜索系统展示了如何将现代Java开发技术与搜索引擎相结合,构建一个高效、可扩展的全文检索平台。通过深入研究和实践,开发者不仅可以提升自己的技术能力,还能更好地理解分布式系统、...

    基于Solr的企业级信息检索的设计与实现

    基于Solr构建企业级信息检索系统是一种可行且有效的解决方案。通过深入分析企业需求,精心设计系统架构,可以显著提升企业内部信息检索的效率和用户体验,助力企业提升核心竞争力。Solr的成熟技术和灵活特性使其成为...

    基于Solr的多表join查询加速方法

    本文将围绕"基于Solr的多表join查询加速方法"这一主题,深入探讨如何在Solr中实现类似join的功能,并优化查询性能。 在Solr中模拟join操作通常有两种策略:嵌入式数据模型和外部数据源查询(ExternalFileField或...

    大数据Solr架构原理.pdf

    Solr,全称为Apache Solr,是一个开源的全文搜索引擎,基于Java开发,是Apache Lucene项目的一部分。Solr以其高效性、可扩展性和易用性,广泛应用于大数据环境中的搜索和数据分析。它不仅可以处理结构化、半结构化和...

    基于Solr的搜索引擎研究与实现

    在实践环节,本文设计并实现了基于Solr1.3的一个多库搜索引擎,该系统支持对多个数据源的搜索,具备良好的可扩展性,便于后期添加新的数据源或调整索引策略。通过这个案例,读者可以了解到如何将理论知识应用于实际...

    基于Solr的分布式铁路科技资源整合与检索实践.pdf

    文章进一步探讨了数据资源整合的方案选型,包括自主开发索引工具、基于Lucene封装实现信息索引、调用第三方API以及基于Solr和Compass+Lucene进行信息索引的几种主要应用模式。其中,基于Solr实现信息索引的模式被...

    solr4.3源代码一

    Solr4.3是Apache Solr的一个早期版本,它是一个基于Lucene的全文搜索服务器,提供了高可配置、可扩展的搜索和分析功能。Solr4.3源代码的获取通常是为了深入理解其内部工作原理,进行定制开发或优化。在你提供的信息...

    solr-6.2.0源码

    Solr是Apache软件基金会开发的一款开源全文搜索引擎,它基于Java平台,是Lucene的一个扩展,提供了更为方便和强大的搜索功能。在Solr 6.2.0版本中,这个强大的分布式搜索引擎引入了许多新特性和改进,使其在处理大...

    基于Solr的分布式全文检索系统的研究与实现.pdf

    本文的研究针对这一问题,通过设计并实现了一个基于Solr的分布式全文检索系统,有效解决了传统系统在处理大规模数据时的瓶颈问题。 系统采用网络爬虫技术,负责从互联网上抓取网页信息。这些信息被保存为文本文件,...

    积分商城基于Solr的搜索引擎优化

    Solr是一个基于Lucene的开源搜索引擎,它提供了一个企业级的搜索服务器,可以用来执行全文搜索、结构化搜索等多种功能。在电子商务网站中,搜索引擎扮演着至关重要的角色,因为它直接影响着用户体验和网站的运营效率...

    Apache Solr 架构分析内部设计篇PDF

    本文将基于《Apache Solr 架构分析内部设计篇PDF》提供的内容,深入探讨Solr的核心架构与设计原理。 #### 二、Solr简介 ##### 2.1 对于用户而言的Solr - **信息检索应用**:Solr是一款用于处理大规模数据的信息...

    基于SOLR的电信增值业务信息检索系统的设计与实现

    SOLR搜索引擎是基于Lucene构建的开源全文搜索引擎应用程序,属于Apache Software Foundation的项目之一。它提供了一种简便的方法来实现全文信息的检索。在电信增值业务中,SOLR可以用来提供信息检索服务,尤其是通过...

    solr搜索培训

    **Solr** 是一个功能强大的、基于 **Lucene** 的全文搜索引擎服务。它能够独立运行,并且通过 WebService 接口提供服务,使得用户可以通过 HTTP 协议将文档以 XML 格式提交到搜索服务器上进行索引操作,同样地,用户...

    solr(solr-9.0.0-src.tgz)源码

    Solr的架构基于Lucene,一个强大的全文搜索引擎库。它提供了分布式、可扩展、高可用性的搜索服务。Solr通过RESTful API与客户端进行交互,支持XML、JSON、CSV等多种数据格式。 2. **核心组件** - **索引**:Solr...

    Apache Solr lucene 搜索模块设计实现

    2. **Apache Solr**:Solr 基于 Lucene,提供了一个更高级的、企业级的搜索平台。它添加了分布式搜索、缓存、集群、日志记录、查询分析、结果高亮、分面搜索等功能,并且提供了基于 XML 和 JSON 的 RESTful API,...

    Apache Solr 搜索架构分析外部设计篇PDF

    Apache Solr是一款基于Java语言开发的开源企业级搜索服务器,它基于Lucene Java搜索库,提供XML/HTTP API、缓存、复制以及网页管理界面等功能。Solr最初由CNET Networks开发,并于2006年12月22日发布1.1版本后加入...

Global site tag (gtag.js) - Google Analytics