`
wbj0110
  • 浏览: 1625426 次
  • 性别: Icon_minigender_1
  • 来自: 上海
文章分类
社区版块
存档分类
最新评论

solr 主从复制

    博客分类:
  • Solr
阅读更多

SOLR复制模式,是一种在分布式环境下用于同步主从服务器的一种实现方式,因之前提到的基于rsync的SOLR不同方式部署成本过高,被SOLR1.4版本所替换,取而代之的就是基于HTTP协议的索引文件传输机制,该方式部署简单,只需配置一个文件即可。以下讲解具体操作步骤: 
步骤分主服务器和从服务器,允许有多个从服务器,即从服务器的配置一样。 

主服务器: 
在solrConfig.xml中: 

Xml代码  
  1. <requestHandler name="/replication" class="solr.ReplicationHandler">  
  2.          <lst name="master">  
  3.                  <str name="replicateAfter">commit</str>  
  4.                  <str name="confFiles">schema.xml,solrconfig_slave.xml:solrconfig.xml</str>  
  5.                  <str name="commitReserveDuration">00:01:00</str>  
  6.          </lst>  
  7.  </requestHandler>  


说明: 

    • replicateAfter : SOLR会自行在以下操作行为发生后执行复制: 'commit', 'startup' 'optimize',这里我们选择commit , 即SOLR每一次接受到commit请求后,会执行复制策略。
    • confFiles : 待分发的配置文件,solr 也会将主服务器上的字段配置文件:schema.xml和stopwords.txt,固排文件: elevate.xml同步到辅服务器上。
    • commitReserveDuration: 每次commit之后,保留增量索引的周期时间,这里设置为5分钟。

 



从服务器: 

Xml代码  
  1.    
  2. <requestHandler name="/replication" class="solr.ReplicationHandler">  
  3.     <lst name="slave">  
  4.         <str name="masterUrl">http://192.168.172.2:7100/solr/${solr.core.name}/replication</str>  
  5.         <str name="pollInterval">00:08:00</str>  
  6.         <!-- external 很容易有索引大小不对, 压缩文件损坏这2个问题, 导致复制无法进行, 且一直复制失败, 测试下来internal没任何问题 -->  
  7.         <str name="compression">internal</str>  
  8.         <str name="httpConnTimeout">1000</str>  
  9.         <str name="httpReadTimeout">2000</str>  
  10.     </lst>  
  11. </requestHandler>  


说明: 

  • masterUrl : 主服务器同步URL地址
  • pollInterval:从服务器同步间隔,即每隔多长时间同步一次主服务器
  • httpConnTimeout:设置连接超时(单位:毫秒)
  • httpReadTimeout:如果设置同步索引文件过大,则应适当提高此值。(单位:毫秒)
  • httpBasicAuthUser:验证用户名,需要和主服务器一致
  • httpBasicAuthPassword:验证密码,需和主服务器一致
  • compression:external or internal 使用SOLR自己的压缩算法或应用容器的
分享到:
评论

相关推荐

    人工智能-项目实践-搜索引擎-基于solrj开发solr主从搜索引擎服务的dubbo组件

    《基于Solrj开发Solr主从搜索引擎服务的Dubbo组件》 在现代信息技术领域,搜索引擎作为信息检索的重要工具,其高效、精准的搜索能力对于企业和用户来说具有极高的价值。本项目实践聚焦于利用Solrj开发一个支持主从...

    solr(solr-9.0.0-src.tgz)源码

    - **复制与恢复**:Solr支持主从复制,确保数据的一致性和高可用性。 3. **源码结构** 解压后的源码包`solr-9.0.0`包含了以下几个关键部分: - `server`: 存放Solr服务器端代码,如SolrJetty容器、管理API等。 ...

    solr 配置 以及建立索引

    ### Solr配置与全文搜索建立索引的...通过以上步骤,可以完成Solr的基本安装、配置及实现简单的主从复制架构。这些配置为后续开发提供了坚实的基础,使得开发者能够利用Solr的强大搜索功能进行高效的数据检索和管理。

    Hbase同步数据到Solr的方案

    这一过程与MySQL的主从复制机制类似,每个Region Server都有自己的WAL Log,并且在ZooKeeper中维护同步位置。 操作时序图大致如下: 1. 客户端(Client)对HBase执行Put或Delete操作。 2. 操作被记录在本地Region ...

    solr 4.10&

    - **Replication(复制)**:通过主从复制,确保数据的一致性和高可用性,当主节点故障时,从节点可以接管服务。 - **Cloud模式**:通过ZooKeeper协调,支持动态添加和删除节点,实现自动负载均衡和故障恢复。 - ...

    Solr3.5开发应用指导

    - **1.2.6 复制**:Solr支持主从复制和分布式部署,确保了高可用性和容错性。 - **1.2.7 管理接口**:Solr提供了丰富的管理接口,便于监控和调整系统设置。 **1.3 Solr服务原理** - **1.3.1 索引**:在索引过程中...

    solr1.4教程

    1.2.6 复制:Solr支持主从复制,确保数据的安全性和高可用性,可以轻松地扩展集群规模。 1.2.7 管理接口:Solr提供了一个基于HTTP的Web管理界面,方便用户监控和配置系统状态。 二、Solr服务原理 1.3.1 索引 ...

    solr教材-PDF版

    - 描述了Solr如何通过主从架构实现数据的复制和分发,从而提高系统的可用性和容错性。 #### 二、Solr的安装与配置 **2.1 在Tomcat下Solr安装** - **2.1.1 安装准备**:介绍安装前需要准备的软件环境和硬件要求。 ...

    solr 企业搜索引擎教程

    - **复制架构**:通过主从复制模式提高系统可用性,支持主节点和多个副本节点之间的数据同步。 #### 7. Solr 的安装与配置 - **安装准备**:需要Java环境、Tomcat容器等。 - **安装过程**:解压Solr包、配置环境...

    开源企业搜索引擎solr的应用教程

    Solr支持数据复制,通过主从复制策略,实现集群的高可用性和数据冗余,保证系统的稳定运行。 1.2.7 管理接口 Solr内置了基于Web的管理界面,方便用户监控和管理索引、日志、系统状态等,简化运维工作。 1.3 Solr...

    开源企业搜索引擎SOLR的 应用教程

    Solr支持主从复制机制,可以在多个节点之间同步索引数据,从而提供高可用性和负载均衡。 - **1.2.7 管理接口** Solr提供了一个Web管理界面,可以方便地监控系统状态、执行管理命令等。 **1.3 Solr服务原理** - *...

    solr 集群搭建1

    5. **Master-Slave模式**:在Solr 4.x版本中,可以通过主从复制的方式实现数据的备份和高可用性。主节点负责接收写操作,而从节点则从主节点同步数据,用于读操作。 6. **Zookeeper配置**:Zookeeper是Apache ...

    开源企业搜索引擎SOLR的应用教程

    Solr支持主从复制和分布式复制,可以实现数据的冗余存储,提高了系统的可用性和容错能力。 ##### 管理接口 Solr提供了一个强大的管理界面,可以进行索引管理、查询分析、系统监控等操作,方便了系统维护和故障排查...

    solr配置和solrJ的使用

    - **操作详情**: 从`apache-solr-1.4.1\dist`目录下复制`apache-solr-1.4.1.war`到Tomcat的`webapps`目录,并重命名为`solr.war`。启动Tomcat以解压WAR包,完成后停止Tomcat。 **5. 配置Tomcat环境变量** - **...

    solr的优化实例1

    - **复制(replication)**:在主从架构中,将主服务器的数据复制到从服务器,提高查询效率。 - **分片(sharding)**:对于大规模数据集,采用分片技术将数据分布在多台服务器上,实现负载均衡。 ##### 3. Scale Deep ...

Global site tag (gtag.js) - Google Analytics