文档已经处理完毕,接下来,开始好似用Lucene处理相关内容。通常情况下,使用 Lucene的步骤如下所示:
(1)为要处理的内容建立索引
(2)构建查询对象
(3)在索引中查找
package com.heming.lucene.process;
import java.io.BufferedReader;
import java.io.File;
import java.io.FileReader;
import jeasy.analysis.MMAnalyzer;
import org.apache.lucene.document.Document;
import org.apache.lucene.document.Field;
import org.apache.lucene.index.IndexWriter;
/**
* 为文档创建索引
*
* @author 何明
*
*/
public class IndexProcesser {
// 成员变量,存储创建的索引文件存放的位置
private String INDEX_STORE_PATH = "d:\\index";
// 创建索引
public void createIndex(String inputDir) {
try {
// 以MMAnalyzer作为分词工具创建一个IndexWriter
IndexWriter writer = new IndexWriter(INDEX_STORE_PATH,
new MMAnalyzer(), true);
File filesDir = new File(inputDir);
// 取得所有需要建立索引的文件数组
File[] files = filesDir.listFiles();
// 遍历数组
for (int i = 0; i < files.length; ++i) {
// 获取文件名
String fileName = files[i].getName();
// 判断文件是否为txt类型的文件
if (".txt"
.equals(fileName.substring(fileName.lastIndexOf(".")))) {
// 创建一个新的 Document
Document doc = new Document();
// 为文件名创建一个Field
Field field = new Field("filename", files[i].getName(),
Field.Store.YES, Field.Index.NOT_ANALYZED);
doc.add(field);
// 为文件内容创建一个Filed
field = new Field("content", loadFileToString(files[i]),
Field.Store.NO, Field.Index.NOT_ANALYZED);
doc.add(field);
// 把Document加入IndexWriter
writer.addDocument(doc);
}
}
// 关闭IndexWriter
writer.close();
} catch (Exception e) {
e.printStackTrace();
}
}
/**
* 从文件中把内容读出,所有的内容放在一个String 容器
*
* @param file
* @return
*/
private String loadFileToString(File file) {
try {
BufferedReader br = new BufferedReader(new FileReader(file));
StringBuffer sb = new StringBuffer();
String line = br.readLine();
while (null != line) {
sb.append(line);
line = br.readLine();
}
br.close();
return sb.toString();
} catch (Exception e) {
e.printStackTrace();
}
return null;
}
public static void main(String[] args) {
IndexProcesser processor = new IndexProcesser();
processor.createIndex("d:\\test");
}
}
我这里用的lucene版本是2.4的,分词用的MMAnalyzer
分享到:
相关推荐
同时,Lucene还提供了工具类,如IndexReader和IndexSearcher,用于读取和搜索已建立的索引,这些在后续的Lucene学习中都是非常重要的部分。 通过不断实践和深入研究,你可以掌握Lucene的强大功能,从而构建高效、...
本工程旨在为初学者提供一个入门Lucene建立索引的实例,帮助理解并掌握这一技术。 **正文:** 1. **Lucene简介** - Lucene是一个高性能、全文本搜索库,适用于Java开发者,可以嵌入到各种应用程序中,创建强大的...
【Lucene】Lucene入门心得 Lucene是一个高性能、全文本搜索库,由Apache软件基金会开发,被广泛应用于各种搜索引擎的构建。它提供了一个简单的API,使得开发者可以方便地在自己的应用程序中集成全文检索功能。...
**Lucene入门学习文档** **一、什么是Lucene** Lucene是Apache软件基金会下的一个开源全文检索库,它提供了一个高性能、可扩展的信息检索服务。Lucene最初由Doug Cutting开发,现在已经成为Java社区中事实上的标准...
4. **建立索引(Indexing)**:创建一个结构化的数据结构,使得可以快速定位到包含特定词元的文档。 5. **查询解析(Query Parsing)**:将用户的查询转换为适合索引结构的表示。 6. **排名(Scoring)**:根据索引...
最后,文档附带了一个示例代码片段,展示了如何使用Lucene为一个文件建立索引。代码中使用了`IndexWriter`、`StandardAnalyzer`和`Field`等关键类,通过创建`Document`对象并将字段添加其中,最终将文档写入索引。这...
1. **索引**:Lucene通过建立索引来提高查询效率。索引是预处理步骤,将文档内容转换为倒排索引结构,便于快速查找匹配的文档。 2. **文档**:在Lucene中,文档是搜索的基本单位,可以包含多个字段,每个字段都有...
**Lucene 入门指南** Lucene 是一个高性能、全文本搜索库,由 Apache 软件基金会开发并维护。它是 Java 开发人员用来构建搜索引擎应用程序的基础工具。本指南将帮助初学者理解 Lucene 的核心概念,以及如何利用它来...
lucene.net 完全入门教程,包括 lucene.net 介绍, lucene.net工作模式, lucene.net分词方法和中文分词方法, lucene.net索引的建立详解, lucene.net搜索详解, lucene.net的下载方法, lucene.net搜索结果实现...
在这个经典Lucene入门模块中,我们将深入理解如何使用Lucene进行索引创建和搜索操作。 首先,我们来看Lucene如何建立数据的索引。这通常涉及以下几个步骤: 1. **索引创建**:使用 `IndexWriter` 对象来创建或更新...
4. **分析器(Analyzer)**:在建立索引前,Lucene会使用分析器对文本进行处理,如分词、去除停用词等,以便更好地匹配用户的查询。 5. **查询(Query)**:用户输入的搜索词经过分析后转换为查询对象,Lucene使用...
2. **建立索引**:通过`IndexWriter`类创建索引,指定索引路径和分析器(如`StandardAnalyzer`)。 3. **创建文档**:使用`Document`类表示要索引的数据,添加字段(如`Field`)并设置相应的属性。 4. **索引文档*...
在建立索引时,Lucene将文档分组到不同的Segment中,每个Segment是一个独立的索引文件。这种设计有助于提高并发性能和减少索引重建的成本。 【性能考量与选择】 Lucene在处理大规模数据时表现良好,如测试所示,...
2. **工作流程**:使用 Lucene 首先需要创建索引,这涉及到对原始数据的分析、分词、建立倒排索引等步骤。然后,用户可以提交查询,Lucene 将根据查询条件在索引中查找匹配的文档。 ### 二、Lucene 2.4 API 使用 #...
lucene为数据库搜索建立增量索引.txt lucene数据库索引.txt 新闻系统全文检索的思绪.txt lucene学习笔记 1 .txt lucene学习笔记 2.txt lucene学习笔记 3 .txt lucene入门实战.txt Lucene 的学习 .txt ...