`
liuhuiqings
  • 浏览: 9109 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

分布式搜索elasticsearch java API 之(四)------搜索

 
阅读更多

elasticsearch的查询是通过执行json格式的查询条件,在java api中就是构造QueryBuilder对象,elasticsearch完全支持queryDSL风格的查询方式,QueryBuilder的构建类 是QueryBuilders,filter的构建类是FilterBuilders。下面是构造QueryBuilder的例子:

 

import static org.elasticsearch.index.query.FilterBuilders.*;    
import static org.elasticsearch.index.query.QueryBuilders.*;    
                
       QueryBuilder qb1 = termQuery("name", "kimchy");    
       QueryBuilder qb2 = boolQuery()    
                           .must(termQuery("content", "test1"))    
                           .must(termQuery("content", "test4"))    
                           .mustNot(termQuery("content", "test2"))    
                           .should(termQuery("content", "test3"));    
       QueryBuilder qb3 = filteredQuery(    
                   termQuery("name.first", "shay"),     
                   rangeFilter("age")    
                       .from(23)    
                       .to(54)    
                       .includeLower(true)    
                       .includeUpper(false)    
                   );

 

 

其中qb1构造了一个TermQuery,对name这个字段进行项搜索,项是最小的索引片段,这个查询对应lucene本身的TermQuery。 qb2构造了一个组合查询(BoolQuery),其对应lucene本身的BooleanQuery,可以通过must、should、mustNot 方法对QueryBuilder进行组合,形成多条件查询。 qb3构造了一个过滤查询,就是在TermQuery的基础上添加一个过滤条件RangeFilter,这个范围过滤器将限制查询age字段大于等于 23,小于54的结果。除了这三个,elasticsearch还支持很多种类的查询方式,迟点写个介绍。
构造好了Query就要传到elasticsearch里面进行查询,下面是例子:

 

SearchResponse response = client.prepareSearch("test")    
        .setQuery(query)    
        .setFrom(0).setSize(60).setExplain(true)    
        .execute()    
        .actionGet();

 

 

这句的意思是,查询test索引,查询条件为query,从第0条记录开始,最多返回60条记录。返回结果为SearchResponse,下面解析SearchResponse:

 

SearchHits hits = searchResponse.getHits();   
for (int i = 0; i < 60; i++) {   
     System.out.println(hits.getAt(i).getSource().get("field"));   
}

 

 

获得SearchResponse中的SearchHits,然后hits.getAt(i).getSource().get("field")获得field字段的值。

 

批量添加删除

 

elasticsearch支持批量添加或删除索引文档,java api里面就是通过构造BulkRequestBuilder,然后把批量的index/delete请求添加到BulkRequestBuilder里 面,执行BulkRequestBuilder。下面是个例子:

 

import static org.elasticsearch.common.xcontent.XContentFactory.*;    
        BulkRequestBuilder bulkRequest = client.prepareBulk();    
        bulkRequest.add(client.prepareIndex("twitter", "tweet", "1")    
                .setSource(jsonBuilder()    
                            .startObject()    
                                .field("user", "kimchy")    
                                .field("postDate", new Date())    
                                .field("message", "trying out Elastic Search")    
                            .endObject()    
                          )    
                );    
        bulkRequest.add(client.prepareIndex("twitter", "tweet", "2")    
                .setSource(jsonBuilder()    
                            .startObject()    
                                .field("user", "kimchy")    
                                .field("postDate", new Date())    
                                .field("message", "another post")    
                            .endObject()    
                          )    
                );
        BulkResponse bulkResponse = bulkRequest.execute().actionGet();    
        if (bulkResponse.hasFailures()) {    
            //处理错误    
        }

 

 

使用More like

 

基于内容的推荐通常是给定一篇文档信息,然后给用户推荐与该文档相识的文档。Lucene的api中有实现查询文章相似度的接口,叫 MoreLikeThis。Elasticsearch封装了该接口,通过Elasticsearch的More like this查询接口,我们可以非常方便的实现基于内容的推荐。
先看一个查询请求的json例子:

 

{    
    "more_like_this" : {    
        "fields" : ["title", "content"],    
        "like_text" : "text like this one",    
    }    
}

其中:

 

fields是要匹配的字段,如果不填的话默认是_all字段
like_text是匹配的文本。
除此之外还可以添加下面条件来调节结果
percent_terms_to_match:匹配项(term)的百分比,默认是0.3
min_term_freq:一篇文档中一个词语至少出现次数,小于这个值的词将被忽略,默认是2
max_query_terms:一条查询语句中允许最多查询词语的个数,默认是25
stop_words:设置停止词,匹配时会忽略停止词
min_doc_freq:一个词语最少在多少篇文档中出现,小于这个值的词会将被忽略,默认是无限制
max_doc_freq:一个词语最多在多少篇文档中出现,大于这个值的词会将被忽略,默认是无限制
min_word_len:最小的词语长度,默认是0
max_word_len:最多的词语长度,默认无限制
boost_terms:设置词语权重,默认是1
boost:设置查询权重,默认是1
analyzer:设置使用的分词器,默认是使用该字段指定的分词器
下面介绍下如何用java api调用,一共有三种调用方式,不过本质上都是一样的,只不过是做了一些不同程度的封装。

 

MoreLikeThisRequestBuilder mlt = new 
                        MoreLikeThisRequestBuilder(client, "indexName", "indexType", "id");
mlt.setField("title");//匹配的字段   
SearchResponse response = client.moreLikeThis(mlt.request()).actionGet();

 

 

这种是在查询与某个id的文档相似的文档。这个接口是直接在client那调用的,比较特殊。还有两种就是构造Query进行查询:

 

MoreLikeThisQueryBuilder query = QueryBuilders.moreLikeThisQuery();   
query.boost(1.0f).likeText("xxx").minTermFreq(10); 

 

这里的boost、likeText方法完全和上面的参数对应的。下面这种就是把要匹配的字段作为参数传进来,参数和MoreLikeThisQueryBuilder是一样的:

MoreLikeThisFieldQueryBuilder query = QueryBuilders.moreLikeThisFieldQuery(fieldname)

 

 

 

 

分享到:
评论

相关推荐

    分布式搜索 elasticsearch 方案研究 - Java API

    **分布式搜索 Elasticsearch 方案研究 - Java API** Elasticsearch 是一款功能强大的开源搜索引擎,它基于 Lucene 库,提供了一个分布式、实时、可扩展的搜索和分析引擎。本方案主要探讨如何利用 Java API 来与 ...

    ElasticSearch Java API 中文文档

    标签《ES Java API 中文文档》强调了文档的内容属性,它属于ElasticSearch的一个重要组成部分,即用Java语言进行数据交互和操作的应用程序接口部分。 从部分内容中可以提取出以下知识点: 1. **Transport Client**...

    分布式搜索elasticsearchjavaAPI之(五)------搜索.pdf

    分布式搜索 Elasticsearch Java API 之(五)------ 搜索 Elasticsearch 是一个基于Lucene的搜索引擎,提供了强大的搜索功能。Java API 是 Elasticsearch 的一个重要组件,允许开发者使用 Java 语言来构建搜索应用...

    基于Elasticsearch Java API的参考手册

    Java API是Elasticsearch官方提供的与Elasticsearch服务器进行交互的主要工具,它使得开发者能够用Java语言便捷地进行索引、搜索、聚合等多种操作。 ### 一、Elasticsearch核心概念 1. **节点(Node)**: Elastic...

    elasticsearch-6.8.0+elasticsearch-analysis-ik-6.8.0 .zip

    Elasticsearch 是一个开源的全文搜索引擎,基于 Lucene 库,提供分布式、实时、可扩展的数据搜索和分析能力。在6.8.0版本中,Elasticsearch 提供了强大的索引管理和查询功能,支持多种数据类型,如文本、数值、日期...

    ElasticSearch Java API

    **Elasticsearch Java API**是Elasticsearch与Java应用程序交互的主要工具,它允许开发者在Java环境中无缝地创建、管理和查询Elasticsearch索引。Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎,用于...

    最新版windows elasticsearch-7.15.2-windows-x86_64.zip

    Elasticsearch基于Lucene构建,它将Lucene的搜索功能封装成易于使用的RESTful API。这使得开发者可以轻松地在应用程序中集成强大的搜索功能,而无需深入理解复杂的搜索引擎底层技术。Elasticsearch具有分布式、实时...

    elasticsearch-7.4.2-linux-x86_64.tar.gz

    1. 分布式架构:Elasticsearch 是一个分布式搜索引擎,这意味着它可以跨多个节点分布数据,并且能够自动处理节点间的通信和数据复制。这种设计提高了系统的可用性和容错性,同时支持大规模的数据处理。 2. 文档型...

    elasticSearch(ES)最新版 ik分词插件7.10 elasticsearch-analysis-ik-7.10.0

    Elasticsearch(ES)是一种流行的开源全文搜索引擎,它基于Lucene构建,提供了分布式、RESTful风格的搜索和分析引擎服务。在中文环境下,为了实现精确的分词和搜索,我们需要安装适合版本的分词插件,如“elastic...

    elasticsearch-7.17.7-windows-x86-64.zip

    Elasticsearch是一个强大的开源搜索引擎,基于Java开发,其核心功能是全文检索,但同时也提供了数据分析、实时聚合以及数据存储的能力。这个"elasticsearch-7.17.7-windows-x86-64.zip"文件是Elasticsearch的7.17.7...

    最新版linux elasticsearch-8.2.3-linux-x86_64.tar.gz

    Elasticsearch是一个开源的全文搜索引擎,它基于Lucene构建,被广泛用于实时数据分析、日志聚合、搜索引擎等场景。在Linux环境下,Elasticsearch的安装和管理是一项基础但至关重要的任务。最新版的Elasticsearch为...

    最新版 elasticsearch-analysis-ik-8.4.1.zip

    Elasticsearch 是一个流行的开源全文搜索引擎,它基于 Lucene 库构建,提供了分布式、实时、高可扩展的搜索和分析功能。在处理中文文本时,Elasticsearch 的默认分析器可能无法满足需求,因为中文句子中没有明显的...

    elasticsearch-7.7.0-2020-linux-x86_64.tar.gz.zip

    Elasticsearch是一个强大的开源搜索引擎,基于Lucene库,由 Elastic 公司开发并维护。它以其高可扩展性、实时性、分布式搜索和分析能力在IT行业中广泛应用,尤其在大数据和日志分析领域表现突出。这里我们将深入探讨...

    elasticsearch-7.9.0-linux-x86_64.rar

    Elasticsearch是一个开源的全文搜索引擎,它以分布式、RESTful API、实时性、高可用性和可扩展性著称。此压缩包"elasticsearch-7.9.0-linux-x86_64.rar"包含了适用于Linux平台的Elasticsearch 7.9.0版本。这个版本在...

    最新版windows elasticsearch-8.2.0-windows-x86_64.zip

    1. 分布式架构:Elasticsearch是一个分布式搜索引擎,意味着它可以跨多个节点分布数据和运算,提供高可用性和容错性。每个节点都能独立工作,并通过网络与其他节点通信,实现数据的复制和负载均衡。 2. RESTful API...

    最新版windows elasticsearch-7.8.0-windows-x86_64.zip

    Elasticsearch是一个开源的全文搜索引擎,它以分布式、RESTful API接口、实时、高可用性和可扩展性而闻名。在Windows环境下安装和使用Elasticsearch 7.8.0版本,用户可以享受到强大的搜索和分析功能,适用于日志分析...

    elasticsearch-7.14.2-windows-x86_64.zip

    Elasticsearch是一个开源的全文搜索引擎,它以分布式、RESTful接口和Apache Lucene库为基础,提供了高可扩展性、实时搜索、分析和存储数据的能力。这个"elasticsearch-7.14.2-windows-x86_64.zip"文件是Elastic...

    elasticsearch-7.17.3

    Elasticsearch 7.17.3 是一个高度可扩展的开源全文搜索引擎,以其强大的分布式、实时搜索和分析能力而闻名。它基于Lucene构建,但提供了更高级别的API和服务,使得管理和操作大规模数据变得更加简单。这个版本的...

    最新版windows elasticsearch-8.5.2-windows-x86-64.zip

    1. **分布式搜索与存储**:Elasticsearch是一个分布式的搜索引擎,这意味着它可以将数据分布在多个节点上,提供高可用性和容错性。每个节点都可以独立工作,并通过网络与其他节点通信,实现数据的分布式索引和搜索。...

Global site tag (gtag.js) - Google Analytics