近来项目需要使用Lucene,工作之余上网学习了下相关内容,做个笔记
1.创建索引
步骤:创建IndexWriter
IndexWriter writer = new IndexWriter(
new NIOFSDirectory(new File(path)), new StandardAnalyzer(
Version.LUCENE_30), MaxFieldLength.LIMITED);
创建Document
创建Field 包含 field名和field值
将Field通过Document的add方法添加到Document中
Document doc = new Document();
doc.add(new Field("text", "It is a text area", Store.YES,
Index.ANALYZED_NO_NORMS));
doc.add(new Field("info", "It is a Infomation area", Store.YES,
Index.ANALYZED_NO_NORMS));
将Document通过IndexWriter的addDocument方法添加到IndexWriter中
关闭IndexWriter
writer.addDocument(doc);writer.close();
2从索引中根据关键字查询
创建IndexSearcher
IndexSearcher searcher = new IndexSearcher(new NIOFSDirectory(new File(
path)));
创建Query
Query query = new QueryParser(Version.LUCENE_30, field,
new StandardAnalyzer(Version.LUCENE_30)).parse(keyword);
通过IndexSearcher的search方法查找关键字,使用TopDocs封装结果集
TopDocs docs = searcher.search(query, 10);
全部代码:(包换了合并内存索引到硬盘索引中)
import java.io.File;
import org.apache.lucene.analysis.standard.StandardAnalyzer;
import org.apache.lucene.document.Document;
import org.apache.lucene.document.Field;
import org.apache.lucene.document.Field.Index;
import org.apache.lucene.document.Field.Store;
import org.apache.lucene.index.IndexReader;
import org.apache.lucene.index.IndexWriter;
import org.apache.lucene.index.IndexWriter.MaxFieldLength;
import org.apache.lucene.queryParser.QueryParser;
import org.apache.lucene.search.IndexSearcher;
import org.apache.lucene.search.Query;
import org.apache.lucene.search.ScoreDoc;
import org.apache.lucene.search.TopDocs;
import org.apache.lucene.store.NIOFSDirectory;
import org.apache.lucene.store.RAMDirectory;
import org.apache.lucene.util.Version;
public class TestLucen {
public static final String path = "E:\\workspaces\\lucene\\index";
public static void main(String[] args) throws Exception {
writeIndex();
readIndex("text", "area");
}
public static void writeIndex() throws Exception {
// 硬盘索引
IndexWriter writer = new IndexWriter(
new NIOFSDirectory(new File(path)), new StandardAnalyzer(
Version.LUCENE_30), MaxFieldLength.LIMITED);
// Ram索引
RAMDirectory ram = new RAMDirectory();
IndexWriter ramwriter = new IndexWriter(ram, new StandardAnalyzer(
Version.LUCENE_30), MaxFieldLength.LIMITED);
Document doc = new Document();
Document doc1 = new Document();
doc.add(new Field("text", "It is a text area", Store.YES,
Index.ANALYZED_NO_NORMS));
doc.add(new Field("info", "It is a Infomation area", Store.YES,
Index.ANALYZED_NO_NORMS));
writer.addDocument(doc);
doc1.add(new Field("text", "it is another area", Store.YES,
Index.ANALYZED));
ramwriter.addDocument(doc1);
ramwriter.optimize();
ramwriter.close();
// 将Ram索引合并到硬盘索引上,必须先调用ram的close方法
writer.addIndexes(IndexReader.open(ram));
writer.optimize();
writer.close();
}
public static void readIndex(String field, String keyword) throws Exception {
IndexSearcher searcher = new IndexSearcher(new NIOFSDirectory(new File(
path)));
Query query = new QueryParser(Version.LUCENE_30, field,
new StandardAnalyzer(Version.LUCENE_30)).parse(keyword);
TopDocs docs = searcher.search(query, 10);
System.out.println("查找到" + docs.totalHits + "个\n对应的text为:");
ScoreDoc[] doc = docs.scoreDocs;
for (ScoreDoc d : doc) {
Document docu = searcher.doc(d.doc);
System.out.println(docu.get(field));
}
}
}
执行结果:
查找到2个
对应的text为:
It is a text area
it is another area
分享到:
相关推荐
本篇文章将围绕"Lucene-2.0学习文档"的主题,结合Indexer.java、MyScoreDocComparator.java和MySortComparatorSource.java这三个关键文件,深入探讨Lucene的核心概念和实际应用。 首先,我们来看`Indexer.java`。这...
总结起来,Lucene5学习之增量索引(Zoie)涉及到的关键技术点包括: 1. 基于Lucene的增量索引解决方案:Zoie系统。 2. 主从复制架构:Index Provider和Index User的角色。 3. 数据变更追踪:通过变更日志实现增量索引...
- **Lucene实战**:通过实际案例,展示如何将Lucene.net应用于实际项目,如网站搜索、日志分析等。 - **Lucene搜索引擎开发进阶**:深入探讨索引优化、查询优化、性能监控等方面,帮助开发者提升搜索引擎的综合能力...
3. **日志分析**:通过索引和搜索日志,快速定位问题和异常。 六、进阶话题 1. **多线程索引**:使用NRTManager(Near Real Time Search)进行高效并行索引。 2. **分布式搜索**:通过Solr或Elasticsearch实现基于...
**Lucene 基础学习笔记与源码分析** **一、Lucene 概述** Lucene 是一个高性能、全文本搜索库,由 Apache 软件基金会开发并维护。它是一个 Java 开发的开源项目,被广泛应用于各种搜索引擎的构建,支持多种编程...
**Lucene学习工具包** Lucene是一个开源的全文搜索引擎库,由Apache软件基金会开发并维护。这个"Lucene学习工具包.zip"包含了学习Lucene所需的重要资料和资源,旨在帮助开发者深入理解和掌握Lucene的核心概念、功能...
`db_search_Log.LDF`和`db_search_Data.MDF`可能是数据库日志和数据文件,它们可能被用作Lucene索引的来源。 3. **查询解析与执行** Lucene提供了强大的查询解析器,能够处理多种查询语法,包括布尔查询、短语查询...
**正文** 日志搜索在IT领域中扮演着至关重要的角色,尤其在系统监控、故障排查和性能优化等方面。...在实际项目中,可以参考`LogSearch-master`这样的示例代码,逐步学习和实践Lucene的日志搜索功能。
《Lucene与SQL对比学习》 在信息技术领域,数据库管理和全文检索是两个至关重要的概念。本文将探讨Lucene和SQL的对比,以帮助新手更好地理解这两种技术的不同应用场景和优势。 一、Lucene简介 Lucene.NET是一个...
- **安装与配置**:下载Weblucene的源代码或二进制包,根据官方文档配置相关参数,如索引目录、日志设置等。 - **创建索引**:使用Weblucene提供的工具,抓取并索引你的网站内容。这一步可能需要定期运行以保持索引...
Lucene是Java语言实现的开源项目,被广泛应用于各种信息检索系统中,包括网站搜索、文档检索、日志分析等场景。此资源对应的是Lucene 3.0.3版本,这是Lucene发展历史中的一个重要里程碑。 在Lucene 3.0.3版本中,...
- **日志分析**:在日志数据分析中,Lucene可以快速定位到关键信息,提升运维效率。 - **知识图谱**:作为底层检索引擎,支持知识图谱中的实体链接和关系检索。 7. **学习资源** - **源码阅读**:通过阅读源码,...
通过这本书,读者可以学习如何使用Lucene进行文本分析、建立倒排索引、执行复杂的查询,并优化搜索性能。 书中详细讲解了以下几个关键知识点: 1. **Lucene基础知识**:介绍Lucene的基本概念,如文档、字段、术语...
3. **日志分析**:快速检索日志信息,便于故障排查和性能监控。 五、总结 Apache Lucene 3.6.0作为一款成熟的全文搜索引擎库,提供了丰富的功能和高度的灵活性。通过理解其核心原理和API,开发者可以轻松地在各种...
学习Lucene的关键在于理解其核心概念,如倒排索引、分词器、查询解析和过滤器等。倒排索引是Lucene实现高效搜索的基础,而分词器则决定了如何将原始文本拆分成可搜索的单元。理解这些概念对于构建自定义的全文检索...
开发者可以通过源代码学习如何集成Lucene到自己的项目中,以实现高效、精确的全文检索功能。 总结,Lucene 3.5的源代码是理解其工作原理的宝贵资源。通过对源码的深入研究,开发者不仅可以掌握Lucene的基本操作,还...
动手实践是学习的最佳途径,尝试运行这些代码,根据日志分析爬虫和搜索引擎的工作流程,将是提升技能的有效方式。 总之,Lucene和Nutch是构建高效、可扩展的搜索引擎的关键工具。通过深入学习和实践这两个项目,你...
Lucene不仅适用于网站搜索,还可用于电子邮件过滤、日志分析、知识图谱构建等多个领域。例如,电子商务网站可以利用Lucene实现商品搜索,论坛可以利用它进行话题检索,企业内部可以搭建文档管理系统,借助Lucene快速...
首先,Lucene是一个高性能、全文本搜索库,由Java编写,广泛应用于各种搜索应用场景,包括网站搜索、文档检索、日志分析等。其核心功能包括分词、索引和查询处理。源码中的主要模块有: 1. 分词器(Tokenizer):这...
10. **错误处理和日志**:解释了如何处理Lucene运行时可能出现的问题,以及如何配置日志系统以便调试和监控。 通过深入学习这份官方文档,开发者不仅能掌握Lucene的基本用法,还能了解到如何根据具体需求调整和扩展...