`

elasticsearch高级配置之线程池设置

阅读更多

elasticsearch高级配置之线程池设置

 

 

一个Elasticsearch节点会有多个线程池,但重要的是下面四个:
索引(index):主要是索引数据和删除数据操作(默认是cached类型)
搜索(search):主要是获取,统计和搜索操作(默认是cached类型)
批量操作(bulk):主要是对索引的批量操作(默认是cached类型)
更新(refresh):主要是更新操作(默认是cached类型)

可以通过给设置一个参数来改变线程池的类型(type),例如,把索引的线程池改成blocking类型:

 

[java] view plaincopy
 
 
  1. threadpool:   
  2.     index:   
  3.         type: blocking   
  4.         min: 1   
  5.         size: 30   
  6.         wait_time: 30s  

下面是三种可以设置的线程池的类型
cache
cache线程池是一个无限大小的线程池,如果有很请求的话都会创建很多线程,下面是个例子:

 

 

[java] view plaincopy
 
 
  1. threadpool:   
  2.     index:   
  3.         type: cached  

fixed
fixed线程池保持固定个数的线程来处理请求队列。
size参数设置线程的个数,默认设置是cpu核心数的5倍
queue_size可以控制待处理请求队列的大小。默认是设置为-1,意味着无限制。当一个请求到来但队列满了的时候,reject_policy参数可以控制它的行为。默认是abort,会使那个请求失败。设置成caller会使该请求在io线程中执行。

 

 

[java] view plaincopy
 
 
  1. threadpool:   
  2.     index:   
  3.         type: fixed   
  4.         size: 30   
  5.         queue: 1000   
  6.         reject_policy: caller  

blocking
blocking线程池允许设置一个最小值(min,默认为1)和线程池大小(size,默认为cpu核心数的5倍)。它也有一个等待队列,队列的大小(queue_size )默认是1000,当这队列满了的时候。它会根据定好的等待时间(wait_time,默认是60秒)来调用io线程,如果没有执行就会报错。

 

 

[java] view plaincopy
 
 
  1. threadpool:   
  2.     index:   
  3.         type: blocking   
  4.         min: 1   
  5.         size: 30   
  6.         wait_time: 30s  
分享到:
评论

相关推荐

    elasticsearch集群安装包

    在本篇中,我们将深入探讨如何进行 Elasticsearch(简称 ES)集群的安装。 首先,了解集群的概念至关重要。在 Elasticsearch 中,集群是一组节点(运行 Elasticsearch 的服务器),它们共同存储数据并处理搜索和...

    ElasticSearch中文学习教程

    ElasticSearch运行在Java虚拟机(JVM)之上,因此JVM配置非常重要。主要关注点包括堆内存大小、垃圾回收策略等。 #### 五、源码分析 **6.1. 使用Guice进行依赖注入与模块化系统** ElasticSearch使用Guice框架来管理...

    elasticsearch-head-chrome-master.zip

    在处理敏感数据时,建议使用更安全的管理工具,并确保 Elasticsearch 配置有适当的认证和授权机制。 总的来说,"elasticsearch-head-chrome-master.zip" 提供了一个便捷的 Elasticsearch 监控解决方案,尤其适合...

    Elasticsearch 技术解析与实战.zip

    前言 第1章 Elasticsearch入门 1 1.1 Elasticsearch是什么 1 1.1.1 Elasticsearch的历史 2 1.1.2 相关产品 3 1.2 全文搜索 3 1.2.1 Lucene介绍 4 1.2.2 Lucene倒排索引 4 1.3 基础知识 6 1.3.1 Elasticsearch术语及...

    Elasticsearch-5.0.2

    Elasticsearch 的核心特性之一是分布式架构。这意味着它可以分布在多台机器上,实现数据的自动分片和复制,提供高可用性和容错性。在 5.0.2 版本中,对集群的管理和节点间的通信进行了优化,提高了数据分布和恢复的...

    分布式搜索 elasticsearch 方案研究 - 基础知识

    分布式搜索是现代大数据处理的关键技术之一,而Elasticsearch作为其中的佼佼者,因其高效、灵活和可扩展性而广泛应用于各种场景。本篇将深入探讨Elasticsearch的基础知识,涵盖其核心概念、环境搭建、配置管理以及...

    ElasticSearch优化

    - 配置优化:根据硬件和使用情况调整ElasticSearch的配置,如内存使用、线程池设置等。 - 硬件优化:改善硬件性能,如使用更快的存储和更多的内存可以显著提升ElasticSearch性能。 5. 监控: 监控ElasticSearch集群...

    ES head插件

    - 配置时,需确保 ES Head 能够连接到 Elasticsearch 集群。可以通过修改项目中的 `config.js` 文件,设置集群的 URL。 2. **功能特性** - **集群监控**:通过 ES Head,用户可以直观查看集群的整体状态,包括...

    Elasticsearch最新2021年面试题,高级面试题及附答案解析.md

    ElasticReporting是Elasticsearch的一个高级特性,主要用于将检索结果导出为PDF、PNG或CSV等格式,方便用户离线查看或分析数据。这是一个收费功能,用于满足特定场景下的需求。 综上所述,Elasticsearch作为一款高...

    springboot整合elasticsearch.md

    - 与 Elasticsearch 版本无关,适用于所有版本的 ES。 - **缺点**: - 不具备高级功能,如批量操作等。 - **应用场景**: - 当需要与不同版本的 Elasticsearch 集群交互时非常有用。 - **Java High Level REST...

    Elasticsearch核心知识篇、项目中如何使用、如何优化进阶

    通过对上述知识点的学习和实践,我们可以更深入地理解和掌握Elasticsearch的核心技术和高级用法。无论是初学者还是经验丰富的开发者,都能够从中获得宝贵的指导和启示。希望本文的内容能够帮助大家更好地利用Elastic...

    linux上安装es需要的安装包.zip

    记住,Elasticsearch是一个高度可配置的服务,具体设置应根据你的具体需求进行调整。在实践中,你可能还会遇到更多关于集群管理、性能优化和故障排查的问题,不断学习和理解Elasticsearch的内部工作原理是至关重要的...

    java常用工具类封装

    Java高级客户端提供了与Elasticsearch服务器通信的能力,支持复杂的查询、索引和聚合操作。它比基于HTTP的RestHighLevelClient更强大,能够更好地处理网络异常和序列化问题,同时提供了更丰富的API来操作数据。 3. ...

    Elasticsearch最新2021年面试题大汇总,附答案.md

    ### Elasticsearch 最新面试题知识点详解 #### 1. Elasticsearch如何读取数据? Elasticsearch采用了一种高效的数据读取机制。当用户发起查询请求时,系统通过Restful API接收请求,并根据文档标识(did)确定数据...

    java es http

    2. **配置连接**:设置Elasticsearch服务器的地址、端口、认证信息等,可以通过`RestClientBuilder`类来完成。 3. **创建请求**:使用`RestHighLevelClient`类,可以创建各种类型的请求,如索引文档(`index()`方法)...

    es5.0高手进阶篇

    - **在线课程**: 利用网络资源学习Elasticsearch的高级用法。 通过上述介绍,我们可以看出Elasticsearch 5.0在功能、性能和安全性方面都有着显著的提升,为用户提供了更为稳定可靠的数据处理平台。无论是对于初学者...

    elasticsearch-java-rest:Elasticsearch Java Rest手册

    **Elasticsearch Java REST客户端详解** Elasticsearch是一款强大的开源搜索引擎,广泛应用于数据存储、分析和检索。在Java开发环境中,使用Elasticsearch时,Java REST客户端是一个关键工具,它允许开发者通过...

    亿级规模的ES查询优化实战_何金城.pdf

    4. 调整Elasticsearch配置:调整Elasticsearch的参数配置,例如更改线程池大小、优化堆内存配置、调整网络设置等。 5. 硬件资源调整:有时候,仅仅优化软件配置是不够的,可能还需要升级服务器硬件,比如增加CPU...

    2-分布式高级篇 _SpringCloud系统_spring_谷粒商城_分布式_分布式高级篇_

    RabbitMQ柔性事务方案、SpringCloud-Gateway网关、Feign远程调用、Sleuth+Zipkin链路追踪系统、Spring Cache缓存、SpringSession跨子域Session同步方案、基于ElasticSearch7全文检索、异步编排与线程池、压力测试...

Global site tag (gtag.js) - Google Analytics