`

solr sharding策略

    博客分类:
  • solr
阅读更多
solr中含有两种sharding策略,一种是默认的compositeId(一致性hash),一般在指定numShards参数时,会自动切换到router="compositeId",如果采用compositeId方式,那么就不能动态增加shard。如果采用的是implicit方式,就可以动态的增加shard。
compositeId:该路由为一致性哈希路由,shards的哈希范围从80000000~7fffffff。初始创建collection是必须指定numShards,compositeId路由算法根据numShards的个数,计算出每个shard的哈希范围,在update或者新增时,根据uniqueid的hash坐落在那个hash区间来决定这份document数据发送至哪个shard。
implicit:该路由方式指定索引具体落在路由到哪个shard,这与compositeId路由方式索引可均匀分布在每个shard上不同。同时只有在implicit路由策略下才可创建shard,同时,在需要update或者add的document中增加_route_字段来存放需要发送的shard名字,以此shard的名字来决定发送至哪个shard,所以由此可以看出ImplicitDocRouter更加灵活。
利用solrJ新建索引时,需要在代码中指定索引具体落在哪个shard上,添加代码如下:
doc.addField("_route_","shard_x")
同时在schema.xml添加字段:
<field name="_route_" type="string"/>
    利用URL创建implicit路由方式collection:

        http://10.21.17.200:9580/solr-5.0.0-web/admin/collections?action=CREATE&name=testimplicit&router.name=implicit&shards=shard1,shard2,shard3
分享到:
评论

相关推荐

    最新版windows solr-8.8.2.zip

    1. **分布式搜索**:Solr支持在多台服务器上分布式部署,通过Sharding和Replication技术,能够处理海量数据,并实现快速的搜索响应。 2. **灵活的数据导入**:Solr提供了DataImportHandler(DIH),可以方便地从...

    solr ik分词器

    同时,为了提高性能和搜索准确性,还可以探索使用Sharding、Caching、分布式搜索等Solr高级特性。 总之,将IK Analyzer集成到Solr中可以显著提升中文文本处理的效果,使得搜索更加准确和高效。通过不断优化配置,你...

    solr4.9.0.zip

    3. **配置灵活**:Solr的配置文件(如solrconfig.xml和schema.xml)提供了高度自定义的能力,可以根据业务需求调整搜索策略和字段设置。 4. **分布式搜索**:Solr 4.9.0 支持分布式搜索,可以将索引分散在多台...

    solr 4.10&

    - **Sharding(分片)**:将大型索引分割成多个部分,每个部分存储在不同的Solr节点上,提高处理能力。 - **Replication(复制)**:通过主从复制,确保数据的一致性和高可用性,当主节点故障时,从节点可以接管...

    solr4.3源代码一

    通过Sharding和Replication,SolrCloud可以将索引分散在多个节点上,实现高可用性和负载均衡。 **Analysis组件** 在你提到的"analysis"目录中,包含的是Solr的文本分析模块。这部分代码负责对输入的文本进行预处理...

    solr搜索服务器安装配置

    3. **分布式部署**:通过Sharding和Replication机制实现Solr集群的分布式部署,提高系统的可用性和扩展性。 4. **监控工具**:使用Solr提供的监控工具或者第三方工具(如Ganglia、Nagios等)对Solr集群进行监控。 #...

    solr-8.1.1.tgz

    8. **自定义插件**:Solr允许开发人员编写自己的插件,以满足特定需求,如自定义查询解析器、过滤器、排序策略等,增强了其灵活性和可扩展性。 9. **性能优化**:每个新版本都会对性能进行优化,Solr 8.1.1也不例外...

    solr-7.5.0.zip

    此外,Solr还支持自定义评分函数,可以按照用户定义的策略进行排序,提升搜索结果的相关性。 3. **Faceted Search(分面搜索)**:Solr 7.5.0提供了强大的分面搜索功能,用户可以根据某个字段的值进行统计和筛选,...

    java solr开发

    - **路由与复制**:根据Sharding策略,查询和更新请求会被正确地路由到相应的Solr节点。 4. **Solr开发** - **API使用**:Solr提供了HTTP RESTful API,可以使用Java客户端库或者直接发送HTTP请求进行交互。 - *...

    solr开发应用教程

    SolrCloud是Solr的分布式解决方案,支持Sharding和Replication,实现跨多个节点的数据分布和冗余备份,提高系统可用性和可扩展性。 七、监控与优化 通过Solr的内置JMX接口,可以监控系统的运行状态,如CPU使用率、...

    solr-config_solrj-demo.rar_DEMO_solr_solr的j

    DEMO可能会讲解如何配置SolrCloud,包括Zookeeper的设置、Sharding和复制策略,以及如何在分布式环境中进行索引和查询操作。 六、Solr的其他特性 除了基础功能,Solr还有许多高级特性,如实时增删改查( Near ...

    最新版windows solr-8.6.0.zip

    - **缓存策略**:Solr提供了多种缓存机制,如文档缓存、查询结果缓存,优化查询性能。 - **索引压缩**:通过选择不同的编码和压缩算法,平衡索引大小和查询速度。 8. **安全和监控** - **Solr Security**:通过...

    solr集群搭建

    集合的配置包括分割策略(sharding)、副本数量和索引配置等。 8. **负载均衡与路由**:SolrCloud会自动处理请求的路由和数据分片,但你可以通过配置`router.field`来指定如何将文档分发到不同的分片。 9. **数据...

    solr-4.2.0

    3. **Sharding与Replication**:Solr 4.2.0加强了sharding(分片)和replication(复制)功能,使得大型数据集可以在多台服务器间均匀分布,提高查询效率和系统容错能力。用户可以通过配置轻松管理分片策略和复制...

    基于solr的网站索引架构(一)

    通过Sharding和Replication,可以实现负载均衡和数据冗余,提高系统的可用性和性能。 8. **优化与调优**: 在实际应用中,我们需要不断优化索引和查询性能。这可能涉及到调整Solr的配置参数,如缓存大小、并发设置...

    solr 7 官方文档

    - **Sharding**:索引可以被划分为多个片(Shards),每个片可以在不同的节点上,提高并发处理能力。 - **复制**:Solr支持数据复制,确保高可用性和数据一致性。 3. **查询与分析** - **查询语法**:Solr支持...

    solr的使用

    SolrCloud是Solr的分布式版本,支持Sharding和Replication,可以处理海量数据。 1. **安装与配置**: 安装Solr通常包括下载最新版本的Solr,解压并运行服务器。在Windows上,可以通过启动`bin/solr start`命令来...

    solr 分布式参考

    2. **Sharding(分片)**: 为了分散存储和查询负担,Solr将大型索引分割为多个部分,这些部分被称为分片。每个分片都是一个完整的Solr索引,可以独立工作并分布在不同的服务器上。 3. **Replication(复制)**: 分...

    solr官方例子加入新的项目并加上发送索引功能

    除了上述基础步骤,还需要注意Solr的版本兼容性、安全性设置、分布式搜索(Sharding和Replication)等方面,尤其是当项目规模扩大时。同时,学习和掌握SolrJ或其他客户端库,能更方便地集成Solr到应用程序中,实现...

    solr in action

    - **核心配置(Core Configuration)**:Solr的核心配置文件(solrconfig.xml)定义了索引和查询处理器的行为,包括缓存策略、更新日志设置等。 - **模式文件(Schema File)**:solrconfig.xml中的schema部分定义了字段...

Global site tag (gtag.js) - Google Analytics