`
cxshun
  • 浏览: 725419 次
  • 性别: Icon_minigender_1
  • 来自: 广州
社区版块
存档分类
最新评论

solr初体验(3)

阅读更多

前两天,学习了solr的基本用法,接下来我们就开始真正来学习一下solr。学习一下它的文件结构,配置文件等。

以我们现在学习的阶段,最重要的文件夹就是example文件夹,这个里面包含了许多我们要学习的东西。

我们再来看一下该文件夹结构

我们看到这样的文件结构,文件夹的意思大家肯定都看得懂,这里只介绍两个文件夹,multicore和solr。

multicore是多个solr实例时才需要用到,现在我们暂时没用,先不管它。solr是自带的一个solr.home,这个是我们此次介绍的重点。

进入此文件夹,我们可以看到如下的结构:

bin文件夹为我们有额外的处理脚本时,需要放在这里,这里暂时没用到,我们先跳过。

conf是solr的配置文件所在,这里是重点。

data为索引目录。

由于我以为运行过,所以有这个data.bak目录,这具是以前的备份。

我们主要来看一下conf文件夹内的配置文件:

这里带副本的是我的备份文件。最主要的文件是schema.xml和solrconfig.xml,其余的如stopwords.txt为停顿词,当索引和查询时遇到这些词会自动忽略,其他文件,我们暂时不用,先不讲了。

打开solrconfig.xml我们可以看到<dataDir>这个标签,默认情况下是这样的

<dataDir>${solr.data.dir:./solr/data}</dataDir>

  它默认在当前目录下的solr目录下创建data目录来存放索引。这就是为什么当我们把solr.home设置成这个时,在tomcat的bin文件夹内启动时会生成solr/data文件夹。因为我们启动tomat时的当前目录为bin。

当然这个不是solr配置错误,对于它自带的jetty服务器来说,它是正确的,因为当前目录,正好是solr的目录。

这个文件我们需要配置的东西不多,先讲到这里,以后用到时再慢慢讲解。

接下来我们看一下重点的schema.xml,这个文件是对我们索引字段的说明,我们可以索引什么field都在这里进行了说明。

我们可以看到里面有一大堆注释,其实看里面的注释,大部分都是可以理解的。这个文件的配置跟我们以后需要进行的中文分词的集成有很大关系,所以这个文件要多看看。

我们看到types标签,而在它里面有一大堆fieldType,里面也有一大堆属性,这里大概介绍一下:

fieldType是定义索引的field类型,它有好几个属性,最主要的是name和class:

name是类型的名称,class是相应的solr中的类。还有两个属性看英文注释可能比较难理解,是sortMissingLast和sortMissingFirst,这两个属性是指当查找出来的内容为空时,它被排在哪里,当sortMissingLast为true时,表示放在最后,sortMissingFirst为true时,表示放在最前。为false时相反。

注意,我们看到后面时发现有fieldType里面有<Analyzer>标签,这个是用于配置分词器的,这个我们以后再说。

接着是<fields>标签和在它里面的<field>,field当然就是我们在索引的内容啦。

它有属性indexed和stored分别对应是否索引和保存,另外还有一个multiValued表示是否允许多值。

这里我们看到features有好几个值,而我们看到配置文件中配置的features也是这样的:

<field name="features" type="text" indexed="true" stored="true" multiValued="true"/>

它表示我们索引的field有多个值,如果这里没配置,在发送数据的时候会报错。

这里的type是对应我们前面配置的fieldType。

另外有一个<dynamicField>这是一个动态匹配的域,

<dynamicField name="*_i"  type="int"    indexed="true"  stored="true"/>

我们看到它的name指定了通配符,它指的是可以匹配所有以_i结尾的名称的field,如果我们指定

<dynamicField name="*"/>

那我们就可以匹配所有的field。

接下来,我们看到:

 <uniqueKey>id</uniqueKey>
<defaultSearchField>text</defaultSearchField>
 <solrQueryParser defaultOperator="OR"/>
  <copyField source="cat" dest="text"/>

        这里应该看英文就可以看明白了,最主要是最下面的copyField,它是指复制field,它会把在source field里的值拷贝到text field里面,这样方便进行索引。注意,这里一般也只有对多值的才会这样做,也即是配置了multiValued为true的field才用copyField.

  

 

  • 大小: 6.8 KB
  • 大小: 2.6 KB
  • 大小: 8.2 KB
  • 大小: 12.6 KB
分享到:
评论

相关推荐

    solr初体验

    Solr初体验:深入理解开源全文搜索引擎 Solr,全称Apache Solr,是一个高度可扩展的、开源的全文搜索引擎平台。它允许开发者通过HTTP接口对大量文本数据进行高效的搜索和分析。Solr由Java编写,是Apache软件基金会...

    Solr初体验

    Solr初体验 Apache Solr 是一款开源的全文搜索引擎,基于 Lucene 库,提供了高效、可扩展的搜索和分析功能。它不仅用于网站的全文检索,还广泛应用于企业级的文档检索、商品搜索以及数据挖掘等领域。这篇博客将带你...

    solr软件包扩展词典可停词配置学习和开发文档

    Solr是中国Apache软件基金会开发的一款高性能、基于Java的全文搜索引擎服务器。...在这个"solr软件包扩展词典可停词配置...在实际项目中,结合具体业务场景,灵活运用Solr的各种功能,将能为企业带来显著的搜索体验提升。

    java基础开发文档

    7. **Lucene和Solr**: Lucene是Java的全文检索库,而Solr是在Lucene基础上构建的搜索引擎服务器。它们用于实现高效的文本搜索功能,理解和掌握这些技术对于提升网站和应用的搜索体验至关重要。 8. **综合案例知识点...

    ElasticSearch入门篇.docx

    - **GitHub**: 2013年初,GitHub选择了ElasticSearch替代原有的Solr系统,用于处理PB级别的数据搜索,包括13亿个文件和1300亿行代码。 - **维基百科**: 维基百科采用了ElasticSearch构建其核心搜索架构,提供高效且...

    nutch入门学习

    Nutch 初体验 ##### 3.1 爬行企业内部网 - **配置 Nutch**:首先需要针对企业内部网的特点调整 Nutch 的配置,例如限制爬取范围、增加代理服务器设置等。 - **配置 Tomcat**:确保 Tomcat 能够正常运行 Nutch 的 ...

    Wiki-Search-Engine:涉及使用大小为 43 GB 的 2013 年数据转储在 Wikipedia Data Dump 上构建搜索引擎。 搜索结果实时返回

    3. 库支持:Java生态系统中有许多优秀的库,如Apache Lucene和Solr,它们提供了完整的搜索引擎解决方案,包括索引、搜索、排序等功能。 四、实时返回搜索结果 要实现搜索结果的实时返回,系统设计需要考虑到低延迟...

    Rafsan:寻找

    在这些领域,开发者可能需要掌握如Elasticsearch、Solr这样的全文搜索引擎,或者使用Python的Scrapy框架进行网络爬虫开发,以获取并处理大量数据。对于推荐系统,机器学习算法,如协同过滤或深度学习模型,也可能是...

Global site tag (gtag.js) - Google Analytics