上次已经介绍了Lucene的功能及简介语法,此次再与大家分享一下实际开发中用Lucene查询数据的Code.
我使用的maven添加的jar包。maven中的pom.xml中添加lucene的jar包的方法是：
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
<modelVersion>4.0.0</modelVersion>
<groupId>com.rwg.lucene</groupId>
<artifactId>cms</artifactId>
<version>0.0.1-SNAPSHOT</version>
<packaging>jar</packaging>
<name>lucene</name>
<url>http://maven.apache.org</url>
<properties>
<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
</properties>
<build>
<finalName>webapp</finalName>
<sourceDirectory>src/main/java/</sourceDirectory>
<testSourceDirectory>src/test/java/</testSourceDirectory>
<plugins>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-compiler-plugin</artifactId>
<version>2.3.2</version>
<configuration>
<source>1.6</source>
<target>1.6</target>
<encoding>UTF-8</encoding>
</configuration>
</plugin>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-resources-plugin</artifactId>
<version>2.4.3</version>
<configuration>
<encoding>UTF-8</encoding>
</configuration>
</plugin>
<plugin>
<groupId>org.mortbay.jetty</groupId>
<artifactId>jetty-maven-plugin</artifactId>
<version>8.0.0.M1</version>
</plugin>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-eclipse-plugin</artifactId>
<version>2.8</version>
<configuration>
<addVersionToProjectName>false</addVersionToProjectName>
<useProjectReferences>false</useProjectReferences>
<wtpmanifest>false</wtpmanifest>
<wtpapplicationxml>true</wtpapplicationxml>
<wtpversion>1.6</wtpversion>
<additionalBuildcommands>
<buildcommand>org.eclipse.jdt.core.javabuilder</buildcommand>
<buildcommand>org.eclipse.wst.common.project.facet.core.builder</buildcommand>
<buildcommand>org.eclipse.wst.validation.validationbuilder</buildcommand>
</additionalBuildcommands>
</configuration>
</plugin>
<plugin>
<groupId>org.apache.maven.plugins</groupId>
<artifactId>maven-war-plugin</artifactId>
<version>2.1.1</version>
<configuration>
<warName>webapp</warName>
</configuration>
</plugin>
</plugins>
</build>
<dependencies>
<!-- 此处是所引用的两个jar包 -->
<dependency>
<groupId>org.apache.lucene</groupId>
<artifactId>lucene-core</artifactId>
<version>3.0.2</version>
<type>jar</type>
<scope>compile</scope>
</dependency>
<dependency>
<groupId>org.apache.lucene</groupId>
<artifactId>lucene-demos</artifactId>
<version>3.0.2</version>
<type>jar</type>
<scope>compile</scope>
</dependency>
</dependencies>
</project>
如果不是使用的maven的童鞋见附件下载lucene3.0.2的两个jar包。
1：运行第一步(建立索引)代码,目的是：将要搜索的txt文件的内容根据字段替换为索引,
并将替换后的索引保存到你所指定的文件夹中。
简单来说就是：创建索引文件。
package com.rwg.lucene;
import java.io.BufferedReader;
import java.io.File;
import java.io.FileNotFoundException;
import java.io.FileReader;
import java.io.IOException;
import java.util.Date;
import org.apache.lucene.analysis.standard.StandardAnalyzer;
import org.apache.lucene.document.Document;
import org.apache.lucene.document.Field;
import org.apache.lucene.index.IndexWriter;
import org.apache.lucene.store.FSDirectory;
import org.apache.lucene.util.Version;
/**
* 创建索引 Lucene 3.0(第一步)
*
* @author RenWeigang
*
* @version 2010.12.13
*
*/
public class Indexer {
//保存索引文件的地方
private static String INDEX_DIR = "E:\\renwg\\茶余饭后\\新建文件夹";
//将要搜索TXT文件的地方
private static String DATA_DIR = "E:\\renwg\\茶余饭后";
public static void main(String[] args) throws Exception {
long start = new Date().getTime();
int numIndexed = index(new File(INDEX_DIR), new File(DATA_DIR));
long end = new Date().getTime();
System.out.println("Indexing " + numIndexed + " files took "
+ (end - start) + " milliseconds");
}
/**
* 索引dataDir下.txt文件，并储存在indexDir下，返回索引的文件数量
*
* @param indexDir
* @param dataDir
* @return
* @throws IOException
*/
public static int index(File indexDir, File dataDir) throws IOException {
if (!dataDir.exists() || !dataDir.isDirectory()) {
throw new IOException(dataDir
+ " does not exist or is not a directory");
}
/**
* 创建IndexWriter对象,
* 第一个参数是Directory,也可以为：Directory dir = new SimpleFSDirectory(new File(indexDir));
* 第二个是分词器,
* 第三个表示是否是创建,
* 如果为false为在此基础上面修改,
* 第四表示表示分词的最大值，比如说new MaxFieldLength(2)，
* 就表示两个字一分，一般用IndexWriter.MaxFieldLength.LIMITED
*
*/
IndexWriter writer = new IndexWriter(FSDirectory.open(indexDir),
new StandardAnalyzer(Version.LUCENE_30), true,
IndexWriter.MaxFieldLength.LIMITED);
indexDirectory(writer, dataDir);
//查看IndexWriter里面有多少个索引
int numIndexed = writer.numDocs();
writer.optimize();
writer.close();
return numIndexed;
}
/**
* 循环遍历dir下的所有.txt文件并进行索引
*
* @param writer
* @param dir
* @throws IOException
*/
private static void indexDirectory(IndexWriter writer, File dir)
throws IOException {
File[] files = dir.listFiles();
for (int i = 0; i < files.length; i++) {
if (files[i].isDirectory()) {
//递归
indexDirectory(writer,files[i]);
} else if (files[i].getName().endsWith(".txt")){
indexFile(writer,files[i]);
}
}
}
/**
* 对单个txt文件进行索引
*
* @param writer
* @param f
* @throws IOException
*/
private static void indexFile(IndexWriter writer, File f)
throws IOException {
if (f.isHidden() || !f.exists() || !f.canRead()) {
return;
}
System.out.println("Indexing " + f.getCanonicalPath());
Document doc = new Document();
doc.add(new Field("contents", new FileReader(f)));
doc.add(new Field("filename", f.getCanonicalPath(), Field.Store.YES,Field.Index.ANALYZED));
/**
* Field.Index有五个属性，分别是：
* Field.Index.ANALYZED：分词索引
* Field.Index.NOT_ANALYZED：分词进行索引，如作者名，日期等，Rod Johnson本身为一单词，不再需要分词。
* Field.Index.NO：不进行索引，存放不能被搜索的内容如文档的一些附加属性如文档类型, URL等。
* Field.Index.NOT_ANALYZED_NO_NORMS：不使用分词索引，不使用存储规则。
* Field.Index.ANALYZED_NO_NORMS：使用分词索引，不使用存储规则。
*/
writer.addDocument(doc);
}
2：运行第二步（搜索索引）,目的是：根据创建索引的字段到所指定的索引文件夹中去寻找要搜索的字符。
简单来说就是：从索引文件中查找你想要得到的信息
package com.rwg.lucene;
import java.io.File;
import java.util.Date;
import org.apache.lucene.analysis.standard.StandardAnalyzer;
import org.apache.lucene.document.Document;
import org.apache.lucene.queryParser.QueryParser;
import org.apache.lucene.search.IndexSearcher;
import org.apache.lucene.search.Query;
import org.apache.lucene.search.ScoreDoc;
import org.apache.lucene.search.TopScoreDocCollector;
import org.apache.lucene.store.FSDirectory;
import org.apache.lucene.util.Version;
/**
* 搜索索引 Lucene 3.0(第二步)
*
* @author RenWeigang
*
* @version 2010.12.13
*
*/
public class Searcher {
//保存索引的地方
private static String INDEX_DIR = "E:\\renwg\\茶余饭后\\新建文件夹";
private static String KEYWORD = "青云";
private static int TOP_NUM = 100;
public static void main(String[] args) throws Exception {
File indexDir = new File(INDEX_DIR);
if (!indexDir.exists() || !indexDir.isDirectory()) {
throw new Exception(indexDir
+ " does not exist or is not a directory.");
}
search(indexDir, KEYWORD);
}
/**
* 查詢
*
* @param indexDir
* 索引目录地址
* @param q
* 要查询的字符串
* @throws Exception
*/
public static void search(File indexDir, String q) throws Exception {
//创建 IndexSearcher对象，相比IndexWriter对象，这个参数就要提供一个索引的目录就行了
IndexSearcher indexSearch = new IndexSearcher(FSDirectory.open(indexDir), true);// read-only
//在建立索引时,存在IndexWriter对象中的
String field = "contents";
/**
* 创建QueryParser对象,
* 第一个参数表示Lucene的版本,
* 第二个表示搜索Field的字段,
* 第三个表示搜索使用分词器
*/
QueryParser parser = new QueryParser(Version.LUCENE_30, field,new StandardAnalyzer(Version.LUCENE_30));
//生成Query对象
Query query = parser.parse(q);
TopScoreDocCollector collector = TopScoreDocCollector.create(TOP_NUM,false);
// start time
long start = new Date().getTime();
indexSearch.search(query,collector);
//搜索结果TopScoreDocCollector里面有 TopDocs,TopDocs里面有scoreDocs[]数组，里面保存着索引值.
ScoreDoc[] hits = collector.topDocs().scoreDocs;
System.out.println("找到了"+hits.length+"个");
//循环ScoreDoc数据，并使用indexSearch.doc方法把Document还原，再拿出对应的字段的值
for (int i = 0; i < hits.length; i++) {
// new method is.doc()
Document doc = indexSearch.doc(hits[i].doc);
System.out.println(doc.getField("filename") + "------------"+ hits[i].toString());
}
indexSearch.close();
// end time
long end = new Date().getTime();
System.out.println("Found " + collector.getTotalHits()
+ " document(s) (in " + (end - start)
+ " milliseconds) that matched query '" + q + "':");
}
}
把代码贴上来了，大家先熟练的使用后再详细研究它的原理。
分享到：
相关推荐
本篇文章将深入探讨Lucene-5.2.1的关键知识点，通过实例解析其工作原理和使用方法。 1. **Lucene核心组件** - **Analyzer**：文本分析器是Lucene处理文本的第一步，它负责将输入的字符串分解为一系列的词项...
- 示例代码：通过阅读和实践提供的 "lucene开发实例"，了解 Lucene 在实际项目中的应用。 总的来说，Lucene 是一个强大且灵活的搜索引擎，其丰富的功能和API使得开发者能够轻松构建高效的信息检索系统。通过实践和...
Lucene.Net，作为.NET平台下的全文搜索引擎库，是开发高效、可扩展的搜索功能的强大工具。4.8.0版本作为其重要的更新迭代，引入了诸多新特性与优化，为开发者提供了更强大的搜索性能和更丰富的功能。本篇将对Lucene...
标题中的“lucene全文检索实例二”指的是使用Apache Lucene这一开源全文搜索引擎库进行二次开发的一个具体案例。在这个实例中，开发者将展示如何在含有10万条数据的环境中实现文件的全文检索，并且包括增、删、改、...
总的来说，王学松的“Lucene+Nutch搜索引擎开发实例代码”是一份宝贵的教育资源，它可以帮助开发者快速入门搜索引擎开发，并深入了解这两个项目的内部工作机制。通过实践这些代码，不仅可以提升技术能力，还能为构建...
标题 "第一个lucene的简单实例" 提到的是关于Apache Lucene的初步应用，这是一个全文搜索引擎库，常用于Java开发中。Lucene提供了高效的文本搜索功能，使得开发者能够快速地在大量数据中查找相关信息。 描述中的 ...
标题"搜索篇:Struts、Lucene的Web实例"暗示我们将探讨如何将这两者结合，创建一个具备全文搜索功能的Web应用。Struts作为后端控制逻辑的主要载体，负责处理用户的请求和业务逻辑；而Lucene则扮演着数据检索的核心...
Lucene是一个开源的全文搜索引擎库，由Apache软件基金会开发并维护。它提供了高效的文本检索、分析和存储功能，被广泛应用于各种需要全文搜索的应用中。本篇将通过一个简单的入门例子，带你了解如何使用Lucene进行...
在开发过程中，我们可以借助Eclipse这样的IDE，通过创建项目，配置Maven依赖，导入Lucene库，编写代码并运行测试。`.classpath`、`.mymetadata`、`.project`、`.settings`等文件是Eclipse项目配置文件，它们记录了...
Lucene是一个高性能、全文检索库，由Apache软件基金会开发并维护，是Java编程语言中广泛使用的搜索引擎库。它提供了一个简单的API，使得开发者能够方便地在应用中实现全文检索功能。本篇文章将围绕Lucene的核心概念...
这篇博客将对Lucene的基本使用进行实例总结，帮助开发者更好地理解和运用这个强大的搜索工具。 1. Lucene的基本架构 Lucene的核心组件包括索引（Index）、文档（Document）、字段（Field）和查询（Query）。首先，...
本篇文章将深入探讨如何在B/S（浏览器/服务器）架构下利用Lucene实现一个简单的搜索引擎实例。 首先，我们需要了解Lucene的核心概念。Lucene提供了一套完整的文本检索框架，包括索引构建、查询解析、评分以及结果...
Lucene 是一个高性能、全文本搜索库，由 Apache 软件基金会开发。它提供了完整的搜索功能，包括索引、查询、评分等，广泛应用于各种项目和产品中。在这个入门案例中，我们将深入理解如何使用 Lucene 3.6 版本来构建...
总结来说，"lucene.zip"包含了一个基于Lucene的简单搜索系统实例，利用了IK分词器对中文文本进行分词，构建了索引，并实现了搜索功能。这个例子对于理解和学习如何在实际项目中使用Lucene进行信息检索是非常有价值的...
Lucene 是一个开源的全文搜索引擎库，由Apache软件基金会开发并维护。它提供了高效、可扩展的搜索功能，被广泛应用于各种信息检索系统。本篇文章将深入探讨Lucene 3.4版本的基础应用，包括如何建立索引、更新索引...
在"LuceneDemo"这个实例中，我们可以通过运行代码，观察索引构建的过程，以及查询结果的返回，从而更直观地理解上述概念。同时，我们还可以通过修改代码，比如更换不同的分析器，调整查询条件，进一步探索Lucene的...