`
kavy
  • 浏览: 888637 次
  • 性别: Icon_minigender_1
  • 来自: 上海
社区版块
存档分类
最新评论

solr缓存

 
阅读更多

Solr 搜索引擎,因此其数据缓存是定义在 Solr 核心配置文件 solrconfig.xml. 一般情况下,如果 Solr 应用的内存足够,将这些缓存设置大一些会得到更好的性能。

过滤器缓存 (Filter cache). Solr 中通过过滤器查询来缩小搜索范围,以有助于提升搜索性能。对 于每个过滤结果,可以放置在专用缓存中。这个缓存通过过滤查询条件作为缓存关键字,相同的查询会通过缓 存命中而快速得到结果,参见下面的配置文件片段作为例子:

<filterCache  class="solr.FastLRUCache"size="8192"

  initialSize="4096"autowarmCount="0"/>

查询缓存 . 查询缓存可以将查 询结果集缓存下来。由于缓存的内容是 Solr 文档对象的 ID 值,因此其内存占用小,可以将缓存大小设置大 一些来换取更好性能。参见下面的配置文件片段作为例子:

<queryResultCache class="solr.LRUCache"size="8192"initialSize="4096"

                                     autowarmCount="0"/>

文档对象缓存 . 文档对 象缓存用来缓存每个文档对象内容。如果文档对象大,数据很多,可以通过该缓存来减少从索引读取完整数据 的时间。参见下面的配置文件片段作为例子:

<documentCache class="solr.LRUCache"size="8192"

initialSize="4096"autowarmCount ="0"/>

域值缓存 . 域值缓存有一个重要作用,是作为 Facet 对象的缓存,能够大幅 提升带有 Facet 域的查询性能。Solr 实现中,对于每个 Facet 会产生一个对象存放 Facet 域与 Solr 文档 对象关系。该对象中会存放一个整型数组,数组大小与 Solr 索引中文档数目一致。因此可以估算一个 Facet 结果对象的大小:

Facet 对象大小 = 4 bytes × 索引文档条目总数量

可以看出对于很大的产 品目录索引,比如有一百万条,一个 Facet 结果对象大约会占用 4M 字节空间。

特别需要注意的是, 即使在 solrconfig.xml 中没有显式配置域值缓存,Solr 代码仍然会创建相应的缓存实例,此时缓存实例大 小是硬性指定的 100000。当站点应用涉及非常多的 facet 时,很容易引起 Solr JVM 内存不足错误。所以一 定要仔细评估所有可能的 Facet 数量,并根据 JVM 可用内存空间显示设置该缓存实例。

<fieldValueCache class="solr.FastLRUCache" size="512"

        showItems="32"autowarmCount="129"/>

此外如果 Solr 有 深入应用定制,可以增加自定义缓存 . 这些用户自定义缓存可以被自定义代码使用。

<cache name="myUserCache"class="solr.LRUCache"

size="8192" initialSize="4096" autowarmCount="0"/>

其他

在 Commerce 的新产品中,也有其他新特性是依赖搜索框架设计实现的,所以在性能优化中也需要统一考 虑。

分享到:
评论

相关推荐

    solr更换memcached缓存的方法

    3. **调整Solr缓存策略** Solr提供了多种缓存策略,你可以根据实际需求调整。例如,可以通过`autowarmCount`参数设置预热数量,通过`size`和`initialSize`控制缓存大小。对于`regenerator`,如果你选择使用...

    java进阶Solr从基础到实战

    视频详细讲解,需要的小伙伴自行网盘下载,链接见附件,永久有效。 Solr它是一种开放源码的...4.Solr缓存 5.Spring Data Solr 章节五:综合案例,电商网站搜索页面 1.关键字搜索 2.搜索面板展示 3.分页 4.排序 5.高亮

    Solr(Cloudera)使用手册

    #### 七、使用Solr缓存 Solr支持多种缓存机制,包括QueryResultCache、FieldValueCache等,这些缓存可以帮助提高搜索性能。 1. **Cache生命周期**:了解各种缓存的生命周期管理机制,比如何时清理缓存、如何设置...

    Apache Solr(solr-8.11.1.zip)

    8. **搜索性能优化**:Solr提供了多种优化手段,包括使用倒排索引、缓存策略、查询优化器等,以提高查询速度和整体性能。 9. **安全与认证**:Solr 8.x引入了内置的安全性框架,包括Zookeeper的ACL和Solr的Role-...

    solr(solr-9.0.0-src.tgz)源码

    - **缓存机制**:Solr有多种缓存,如查询结果缓存、文档值缓存等,可以显著提高性能。 - **分布式搜索**:通过ShardRequest和ShardResponse处理跨节点通信,优化大规模数据的搜索效率。 通过深入研究`solr-9.0.0-...

    solr中cache综述

    ### Solr中Cache综述及优化策略 ...不同类型的缓存在设计时考虑了不同的应用场景,因此在部署Solr时应根据实际情况选择合适的缓存策略。此外,还需要注意监控缓存的使用情况,确保它们能够有效地支持系统的运行。

    solr cache部分 中文解释

    Solr 还允许自定义缓存配置,包括设置缓存大小、替换策略(如LRU、LFU或FIFO)以及缓存的内存分配。在 Solr 的配置文件(如solrconfig.xml)中,可以通过指定缓存的名称、容量、替换策略等参数来调整这些设置。 在...

    solr4.4版本

    solr4.4版本,解压后可以放于tomcat下运行,可以配置数据库连接及SQL语句,将查询结果放在solr中缓存,项目直接操作solr,可以配置定时任务(PS:定时任务只支持到4.4版本,以后版本目前没有)solr作为数据库和项目...

    SOLR的应用教程

    Solr内置了多种缓存机制,如查询结果缓存、文档缓存、过滤器缓存等,以提高查询速度和系统性能。 1.2.6 复制 Solr支持数据复制,确保在主节点故障时,数据不会丢失,保持服务的高可用性。 1.2.7 管理接口 Solr...

    solr-4.4.0.tgz

    - 根据系统负载和性能需求,调整 Solr 的配置参数,例如增加索引段大小、调整缓存设置等。 以上就是 Solr 4.4.0 版本的主要知识点,以及如何在 Linux 环境下进行安装和部署到 Tomcat。通过熟练掌握这些步骤,你将...

    solr-4.10.3.rar

    6. **性能优化**:Solr提供了多种优化策略,如利用NRT(Near Real Time)机制实现快速搜索更新,通过Shard路由策略分发查询负载,以及通过缓存机制提高响应速度。 7. **扩展性**:Solr支持多种插件机制,可以扩展其...

    最新版windows solr-8.8.2.zip

    9. **性能优化**:Solr可以通过调整缓存策略、使用NRT(Near Real Time)索引、优化查询执行计划等方式提高查询速度。 10. **安全与身份验证**:Solr 8.8.2可能包含安全模块,允许设置访问控制列表(ACLs)和角色...

    solr7.0性能测试报告

    每次 HTTP 请求都使用独立连接,关闭了 Solr 查询缓存和文档插入缓存,以获取在最不利条件下的性能数据。 测试步骤包括使用 Maven 将代码打包并上传到服务器,然后执行并发访问测试。测试数据是一些描述性文本,...

    solr深入浅出

    在特性方面,Solr不仅利用了Lucene的强大搜索能力,还增加了如Schema模式定义、多种查询选项、核心管理和缓存机制等高级特性。Schema允许用户自定义数据模型,包括字段类型、复制字段和动态字段,以适应不同业务需求...

    solr4.9开发所需jar包

    10. **性能优化**:掌握如何调整Solr的配置参数,如缓存大小、索引策略等,以适应不同的工作负载。 总之,Solr4.9开发涉及多个方面,从基本的索引构建到复杂的分布式搜索和数据处理,都需要开发者有扎实的技术基础...

    apache-solr-dataimportscheduler-1.0.zip_official54l_solr 5.x定时生成

    例如,设置合理的数据导入批次大小、使用缓存策略减少数据库查询压力、处理导入失败时的重试机制等。 总的来说,"apache-solr-dataimportscheduler-1.0.zip"是一个为Solr 5.x提供定时索引生成能力的重要工具,它...

    solr-7.1.0.zip solr搜索引擎安装包

    `solrconfig.xml`中可以配置请求处理器、缓存策略、更新处理流程等。例如,添加`update.autoCommit`设置可以控制索引何时自动提交,以确保数据的实时性。 `schema.xml`则定义了字段类型(field types)和字段...

    支持solr5.5 solr6.0中IK分词需要的资料

    - **性能调优**:根据实际数据量和查询需求调整 IK 分词器的配置参数,如缓存大小、最大扩展词长度等。 - **分词结果的精度**:观察并评估分词结果,对特定领域可能需要自定义词典以提高分词的准确性。 - **多语言...

    asp.net调用Solr

    最后,为了优化性能,你还可以考虑在ASP.NET中实现缓存策略,例如使用内存缓存或者分布式缓存服务(如Redis),减少对Solr的频繁访问。 总结来说,ASP.NET调用Solr涉及的主要知识点包括:使用SolrNet客户端库、配置...

    solr-6.6.0压缩包

    - 缓存策略:调整查询缓存和过滤器缓存设置,提升查询速度。 - 配置硬件资源:根据实际负载调整内存和磁盘资源。 8. **SolrCloud** - 在Solr 6.6.0中,SolrCloud提供了分布式管理和数据存储,支持ZooKeeper协调...

Global site tag (gtag.js) - Google Analytics