`

提高elasticsearch索引速度

阅读更多

提高索引性能和速度从几下方面着手:

 1. 增大索引实时时间设置:index.engine.robin.refresh_interval :10s (默认为1s) 

 2. 增大内存缓冲区: indices.memory.index_buffer_size:20% (默认为heap大小的10%)

 3. 增加translog方面的设置: index.translog.flush_threshold:10000 (默认为5000)

 4. 增加分配给ES的内存, 默认为1g.

 5. 减小replaca. 索引时可设置为0. 完成索引后再设置成想要的。 

 6. 增加机器数。

 7. index.merge.policy.use_compound_file 设置为false. 这样的话, 可以减少Merge (保证open file size 够 大)。

 

 

0
0
分享到:
评论

相关推荐

    elasticsearch索引介绍.pptx

    Elasticsearch(ES)是一种基于Lucene的分布式、RESTful搜索和分析引擎,广泛用于大数据的实时分析和检索。在本讲座中,我们将深入探讨Elasticsearch中的索引概念及其重要性。 首先,让我们理解一下ES中的“索引”...

    Elasticsearch7.0备份索引脚本

    **Elasticsearch 7.0 备份索引脚本详解** 在大数据分析和日志管理领域,Elasticsearch(ES)是一个广泛使用的开源搜索引擎和分析引擎。它提供了实时、可扩展的搜索和分析功能。然而,数据的安全性和可靠性至关重要...

    Elasticsearch索引恢复

    4. 并行恢复:Elasticsearch可以并行恢复多个分片,合理配置并发恢复的数量可以提高效率。 四、监控和优化恢复 使用Elasticsearch的 `_cat/shards` API 或 Kibana 的 Monitoring 功能,可以监控恢复过程,观察哪些...

    Elasticsearch数据导出工具

    6. **效率优化**:工具可能采用了多线程、批量操作等技术,以提高数据导入导出的速度和效率,同时减轻对Elasticsearch和MySQL服务器的压力。 7. **易用性**:为了简化用户的操作流程,工具可能提供命令行界面或图形...

    ElasticSearch官方测试数据

    Elasticsearch(ES)是一种流行的开源全文搜索引擎,它基于Lucene库构建,被广泛用于大数据分析、日志聚合、实时搜索和索引等场景。官方提供的测试数据集是检验Elasticsearch功能、性能和稳定性的关键资源,可以帮助...

    elasticsearch-7.4.0-win64.rar

    Elasticsearch是一个开源的全文搜索引擎,它以分布式、RESTful服务的方式提供快速、高可用、可扩展的数据搜索和分析能力。这个"elasticsearch-7.4.0-win64.rar"压缩包包含了Elasticsearch 7.4.0版本的Windows 64位...

    elasticsearch-hadoop-8.8.0

    Elasticsearch有自己的RESTful API,用于索引、搜索、分析和管理数据。通过Elasticsearch-Hadoop,用户可以在Hadoop环境中使用这些API,实现对Elasticsearch集群的操作。 Elasticsearch-Hadoop的主要功能包括: - ...

    elasticsearch-analysis-pinyin-7.4.0 es拼音分词器7.4.0

    Elasticsearch(简称ES)是一款强大的开源搜索引擎,广泛应用于大数据领域的全文检索。它以其高可扩展性、实时性能以及丰富的分析能力著称。在中文环境下,由于汉字的复杂性,分词是实现有效搜索的关键步骤。为此,...

    最新版Elasticsearch调优搜索速度.pdf

    在实际应用中,优化Elasticsearch的搜索速度是确保高效服务的关键。本文将深入探讨影响Elasticsearch查询性能的因素,并提出一系列调优策略。 首先,Elasticsearch的软件生态包括Elastic Stack,由Elasticsearch、...

    elasticsearch-7.14.2-windows-x86_64.zip

    1. **性能优化**:此版本通常会包含对查询速度、索引速度和内存管理的改进。 2. **安全增强**:可能增加了对用户身份验证、访问控制和加密的支持。 3. **新功能**:可能引入了新的API、查询语法或数据分析工具。 ...

    elasticsearch6.6.0 aarch64 arm

    1. **增强的搜索性能**:Elasticsearch 6.6.0对搜索算法进行了优化,提升了查询速度和响应时间,尤其是在处理大规模数据时,能够提供更快的搜索体验。 2. **多租户支持**:支持多个独立索引,每个索引有自己的设置...

    Elasticsearch2.4.4免安装下载

    1. **Lucene**: Elasticsearch 内部依赖于 Apache Lucene,这是一个强大的全文搜索引擎库,为Elasticsearch 提供了基础的索引和搜索功能。 2. **分布式架构**: 它支持分布式的文档存储和索引,这意味着数据可以自动...

    elasticsearch-jdbc-2.3.3.0-dist.zip

    2. **启动数据流**: 启动JDBC River后,Elasticsearch会定期或实时地从MySQL中读取数据,并将其索引到指定的Elasticsearch索引中。用户可以根据需求设置同步频率,例如定时任务或实时监听。 3. **数据映射与转换**:...

    ElasticSearch Head 适配ElasticSearch 7.0 +

    2. **性能提升**:Elasticsearch 7.0在性能上进行了优化,包括更快的搜索速度和更高的索引吞吐量。ElasticSearch Head的适配意味着用户可以通过UI直观地感受到这些性能提升。 3. **新功能**:Elasticsearch 7.0引入...

    Elasticsearch 8.1.2 Linux版本

    5. **分片(Shard)**:为了分散存储和提高查询效率,Elasticsearch将索引分成多个分片。分片可以在不同节点上,使得数据分布更均匀。 6. **副本(Replica)**:每个分片的副本用于提高数据可用性和容错性,当主分片...

    最新版windows elasticsearch-7.17.1-windows-x86_64.zip

    - 使用`bin/elasticsearch-index.sh`或`bin/elasticsearch-reindex.sh`脚本进行数据导入和索引重建。 - 利用Elasticsearch的RESTful API进行数据操作,例如`PUT`、`GET`、`DELETE`等请求。 6. **监控与日志**: ...

    elasticsearch-analysis-ik 7.10.0 分词器

    **Elasticsearch Analysis IK 7.10.0 分词器详解** Elasticsearch 分词器是搜索引擎核心组件之一,负责将输入的文本拆分成可搜索的独立单元——词语。在中文环境中,这个过程尤为重要,因为中文句子由多个汉字组成...

Global site tag (gtag.js) - Google Analytics