博客首页 → elasticsearch

最新文章列表

Elasticsearch集群信息查看及重启维护流程

编写不易，转载请注明（ http://shihlei.iteye.com/blog/2418651）！   一 概述         最近做Elasticsearch优化，需要调整节点参数，重启，查看是否生效。线下测试集群一般使用head插件，方便。但head插件需要其所在节点能正常提供服务，且客户端浏览器网络可达。这种约束不适合线上运维，最直接方式还是使用Elasticsearch提供的 ...
elasticsearchelassticsearch信息查看elasticsearch重启elasticsearch集群信息elasticsearch节点信息 
ShihLei 评论(0) 有7537人浏览 2018-04-15 13:58

Elasticsearch返回父子数据关联查询案例

在《Elasticsearch 父子关系维护和检索案例分享》一文中介绍了Elasticsearch 父子关系维护和检索的基本功能，本文接着上篇文档，分享同时返回父子数据Elast ...
ElasticSearchinner_hitsbbosshas_childhas_parent 
yin_bp 评论(0) 有4803人浏览 2018-04-13 12:36

Elasticsearch 父子关系维护和检索案例分享

Elasticsearch 父子关系维护和检索案例分享,展示has_child和has_parent的基本用法。 本文涉及技术点： 1.删除和创建公司/雇员父子关系的索引表 2.bulk批量导入json格式数据 3.ormapping方式bulk批量导入数据 4.采用@ESId指定文档_id 5.采用@ESParentId制定子文档的parent信息 6.基本的has_child和has_par ...
elasticsearchbbosshas_childhas_parent 
yin_bp 评论(0) 有3020人浏览 2018-04-10 20:08

elasticsearch里面bulk的用法

上篇文章介绍了在es里面批量读取数据的方法mget，本篇我们来看下关于批量写入的方法bulk。 bulk api可以在单个请求中一次执行多个索引或者删除操作 ...
elasticsearch 
qindongliang1922 评论(0) 有1424人浏览 2018-04-09 20:23

elasticsearch里面的关于批量读取mget的用法

es的api除了提供了基本的curd操作外，还有两个针对批量的操作分别是： 1，批量的读取操作（mget） 2，批量的写入操作（bulk） 本篇文章先介绍mget的用 ...
elasticsearch 
qindongliang1922 评论(0) 有1834人浏览 2018-04-04 16:01

Elastic Stack从入门到实践

Elastic Stack从入门到实践 网盘地址：https://pan.baidu.com/s/158hi13EAUCu4Gbfd2ik9AQ 密码：r84m 备用地址（腾讯微云）：https://share.weiyun.com/5zXikYH 密码：2pnbzx 第1章 课程概述 第2章 Elasticsearch 篇之 入门 第3章 Elasticsearch 篇之倒排索引与分词 第4章 ...
Elasticsearch 
世界尽头没有你 评论(0) 有2955人浏览 2018-04-04 09:12

elasticsearch的查询流程分析

我们都知道es是一个分布式的存储和检索系统，在存储的时候默认是根据每条记录的_id字段做路由分发的，这意味着es服务端是准确知道每个document分布在 ...
elasticsearch 
qindongliang1922 评论(0) 有1331人浏览 2018-04-02 20:29

Elasticsearch Sliced Scroll分页检索案例分享

Elasticsearch Sliced Scroll分页检索案例分享 我们在文章《Elasticsearch Scroll分页检索案例分享》中介绍了elasticsearch scroll的基本用法，本文介绍Elasticsearch Sliced Scroll分页检索功能。 1.准备工作 参考文档《高性能elasticsearch ORM开发库使用介绍》导入和配置es客户端 2.定义Sl ...
elasticsearchbbossscrollslice 
yin_bp 评论(0) 有3836人浏览 2018-04-02 18:28

Elasticsearch地理位置维护及检索案例分享

Elasticsearch地理位置信息维护及检索案例分享 1.准备工作 参考文档《高性能elasticsearch ORM开发库使用介绍》导入和配置es客户端到工程 2.定义带地理位置类型的mapping 创建一个city索引表结构,字段location的 类型为geo_point,并且定义一个检索的dsl语句 在resources目录下创建文件esmapper/address.xml,内容如 ...
elasticsearchbboss 
yin_bp 评论(0) 有1742人浏览 2018-03-31 21:36

Elasticsearch Scroll分页检索案例分享

Elasticsearch Scroll分页检索案例分享 1.准备工作 参考文档《高性能elasticsearch ORM开发库使用介绍》导入和配置es客户端bboss 2.定义scroll检索dsl 首先定义一个简单的scroll dsl检索脚本 <properties> <property name="scrollQuery"> ...
elasticsearchbbossscroll 
yin_bp 评论(0) 有4140人浏览 2018-03-28 20:40

如何在elasticsearch里面使用深度分页功能

前面的文章提到过es默认的from+size的分页方式返回的结果数据集不能超过1万点，超过之后返回的数据越多性能就越低。 这是因为es要计算相似度排名，需要排序整个整个结果集，假设我们有一个index它有5个shard，现在要读取1000到1010之间的这10条数据，es内部会在每个shard上读取1010条数据，然后返回给计算节点，这里有朋友可能问为啥不是10条数据而是1010条呢？这是因为某 ...
elasticsearch 
qindongliang1922 评论(0) 有2023人浏览 2018-03-28 18:13

如何在Elasticsearch里面使用索引别名

在elasticsearch里面给index起一个aliases（别名）能非常优雅的解决两个索引无缝切换的问题，这个功能在某些场景下非常使用。 比如电商的核心商品索引库，除了实时增量数据外，每天都要重建一遍索引，避免index里面的数据和db里面的数据不一致，因为index分shard了，所以要一个一个的shard做全量替换，直到所有的shard替换完毕，才能宣布重建成功。整个过程其实还是风险挺 ...
elasticsearch 
qindongliang1922 评论(0) 有1681人浏览 2018-03-27 20:37

如何优雅的全量读取Elasticsearch索引里面的数据

### （一）scroll的介绍 有时候我们可能想要读取整个es索引的数据或者其中的大部分数据，来重建索引或者加工数据，相信大多数人都会说这很简单啊直接用from+size就能搞定，但实际情况是from+size的分页方法不适合用于这种全量数据的抽取，越到后面这种方法的性能就越低，这也是es里面为什么限制了单次查询结果的数据不能超过1万条数据的原因。 es里面提供了scroll的方式来全量读取 ...
elasticsearch 
qindongliang1922 评论(0) 有7655人浏览 2018-03-26 20:27

Elasticsearch Mget、GetDocSource、索引部分更新案例分享

1.前期准备 参考文档《高性能elasticsearch ORM开发库使用介绍》导入和配置es客户端bboss 2.mget操作 简单而直观的多文档获取案例    ClientInterface clientUtil = ElasticSearchHelper.getRestClientUtil(); //获取json报文 String response = clientUtil ...
elasticsearchbboss 
yin_bp 评论(0) 有1285人浏览 2018-03-25 08:55

工作笔记4 - ES架构及原理

Elasticsearch 是一个兼有搜索引擎和NoSQL数据库功能的开源系统，基于Java/Lucene构建，可以用于全文搜索，结构化搜索以及近实时分析。可以说Lucene是当今最先进，最高效的全功能开源搜索引擎框架。 说明： Lucene：只是一个框架，要充分利用它的功能，需要使用JAVA，并且在程序中集成Lucene，学习成本高，Lucene确实非常复杂。 Elasticsearch 是 面 ...
ElasticsearchES 
呕心沥熊 评论(0) 有1172人浏览 2018-03-22 10:07

关于elaticsearch中更新数据的几种方式

作为一个成熟的框架，Elasticsearch里面提供了丰富的操作数据的api，本篇我们就来学习一下在es中更新数据的几种方式。 （一）更新文档 （1）部分更 ...
elasticsearch 
qindongliang1922 评论(0) 有969人浏览 2018-03-21 19:00

Elasticsearch里面的segment合并

通过前面的文章，我们已经知道在elasticsearch中每个shard每隔1秒都会refresh一次，每次refresh都会生成一个新的segment，按照这个速度过不了多久segment的数 ...
elasticsearch 
qindongliang1922 评论(0) 有2094人浏览 2018-03-20 17:50

Elasticsearch如何保证数据不丢失？

上篇文章提到过，在elasticsearch和磁盘之间还有一层cache也就是filesystem cache，大部分新增或者修改，删除的数据都在这层cache中，如果没有flush操作，那么就不能100%保证系统的数据不会丢失，比如突然断电或者机器宕机了，但实际情况是es中默认是30分钟才flush一次磁盘，这么长的时间内，如果发生不可控的故障，那么是不是必定会丢失数据呢？ 很显然es的设计者 ...
elasticsearch 
qindongliang1922 评论(0) 有2144人浏览 2018-03-19 20:52

为什么说Elasticsearch搜索是近实时的？

通过前面两篇文章的介绍，我们大概已经知道了 Elasticsearch处理数据的流程，其中在Elasticsearch和磁盘之间还有一层称为FileSystem Cache的系统缓存，正是由于这层cache的存在才使得es能够拥有更快搜索响应能力。 我们都知道一个index是由若干个segment组成，随着每个segment的不断增长，我们索引一条数据后可能要经过分钟级别的延迟才能被搜索，为什么 ...
elasticsearch 
qindongliang1922 评论(1) 有9460人浏览 2018-03-16 19:41

Elasticsearch如何动态维护一个不可变的倒排索引

上一篇文章中介绍了Elasticsearch中是如何搜索文本的，同时也简述了在es里面索引数据结构的特点不可变性。 索引不可变性的缺点限制了单个索引存储的最大数据量以及更新的频次，所以es面临的问题是如何解决倒排索引不可更新的特点而同时仍然保持不可变特性带来的好处。 答案就是使用多个索引 代替原来的每次重写整个索引，es里面采用方式是增加新的索引来反映最近的变化，然后查询的 ...
elasticsearch 
qindongliang1922 评论(0) 有1140人浏览 2018-03-15 21:34

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics