`
42087743
  • 浏览: 239182 次
  • 性别: Icon_minigender_1
  • 来自: 合肥&上海
社区版块
存档分类
最新评论

lucene-1.4入门例子的详细注释

阅读更多
[size=small]才开始学习lucene,所以从网上找了个不错的入门例子来看,并且加了很详细的注释,假如有不对的地方,还请大家指正:
Indexer.java
// 索引生成类
public class Indexer {
	// 传入2个参数,一个是索引文件路径,一个是数据文件路径
	public static void main(String[] args) throws Exception {
		// 如果没有传入2个文件,则抛出异常
		if (args.length != 2) {
			throw new Exception("Usage: java " + Indexer.class.getName()
					+ " <index dir> <data dir>");
		}
		// 读取索引文件
		File indexDir = new File(args[0]);
		// 读取数据文件
		File dataDir = new File(args[1]);
		long start = new Date().getTime();
		// 调用index方法生成索引
		int numIndexed = index(indexDir, dataDir);
		long end = new Date().getTime();
		// 打印文件数目和花费时间
		System.out.println("Indexing " + numIndexed + " files took "
				+ (end - start) + " milliseconds");
	}

	// open an index and start file directory traversal
	public static int index(File indexDir, File dataDir) throws IOException {
		// 如果2个文件有一个找不到,则抛出异常
		if (!dataDir.exists() || !dataDir.isDirectory()) {
			throw new IOException(dataDir
					+ " does not exist or is not a directory");
		}
		// IndexWriter: 创建和维护索引的类
		// StandardAnalyzer: 分析器,筛选出无用的词语
		// true: 是否重建索引. false: 扩展索引
		IndexWriter writer = new IndexWriter(indexDir, new StandardAnalyzer(),
				true);
		// true:在创建索引库时,会合并多个 Segments 文件到一个 .cfs 中。此方式有助于减少索引文件数量,减少同时打开的文件数量。
		writer.setUseCompoundFile(false);
		// 读取数据文件
		indexDirectory(writer, dataDir);
		// 得到当前索引文件中的文件数量
		int numIndexed = writer.docCount();
		/*
		 * IndexWriter为了减少大量的io维护操作,在每得到一定量的索引后建立新的小索引文件(笔者测试索引批量的最小单位为10),
		 * 然后再定期将它们整合到一个索引文件中,因此在索引结束时必须进行 writer.optimize(),以便将所有索引合并优化。
		 */
		writer.optimize();
		// 关闭对象
		writer.close();
		// 返回索引文件的文件数量
		return numIndexed;
	}

	// recursive method that calls itself when it finds a directory
	// 读取数据文件,假如是目录则遍历
	private static void indexDirectory(IndexWriter writer, File dir)
			throws IOException {
		// 将数据文件读入数组中,还可以把目录也读入
		File[] files = dir.listFiles();
		// 遍历
		for (int i = 0; i < files.length; i++) {
			File f = files[i];
			// 假如读入的是目录,那么递归调用自己
			if (f.isDirectory()) {
				indexDirectory(writer, f);
				// 假如读入的是txt文件,读取它
			} else if (f.getName().endsWith(".txt")) {
				indexFile(writer, f);
			}
		}
	}

	// method to actually index file using Lucene
	// 将一个文件读取到IndexWriter对象中去
	private static void indexFile(IndexWriter writer, File f)
			throws IOException {
		// 假如准备读取的数据文件为隐藏,不存在,不能读,则返回不进行操作
		if (f.isHidden() || !f.exists() || !f.canRead()) {
			return;
		}
		// 打印出数据文件的路径
		System.out.println("Indexing " + f.getCanonicalPath());
		// Document:类似一条数据库中的一条数据
		// Field:类似字段
		Document doc = new Document();
		// Text(String,Reader):本方法适用于简短的文本,如title,subject,String可以被检索,但是不可以从检索结果中得到
		doc.add(Field.Text("contents", new FileReader(f)));
		// Keyword(String,String):本方法适用在date和url上,String可以被检索,也可以从检索结果中得到
		doc.add(Field.Keyword("filename", f.getCanonicalPath()));
		// 索引添加一个文档
		writer.addDocument(doc);
	}
}


Searcher.java
// 检索类
public class Searcher {
	// 传入2个参数,目录文件名和检索关键字
	public static void main(String[] args) throws Exception {
		if (args.length != 2) {
			throw new Exception("Usage: java " + Searcher.class.getName()
					+ " <index dir> <auery>");
		}
		File indexDir = new File(args[0]);
		String q = args[1];
		if (!indexDir.exists() || !indexDir.isDirectory()) {
			throw new Exception(indexDir
					+ " does not exist or is not a directory.");
		}
		search(indexDir, q);
	}

	public static void search(File indexDir, String q) throws Exception {
		// 将目录文件的目录封装成对象
		Directory fsDir = FSDirectory.getDirectory(indexDir, false);
		// 创建查询器,在提供的目录上查找索引文件
		IndexSearcher is = new IndexSearcher(fsDir);
		// QueryParser.parse():1.检索的关键字;2.检索的范围,常用的是subject,text,contents,title等等;3.分析器
		Query query = QueryParser.parse(q, "contents", new StandardAnalyzer());
		long start = new Date().getTime();
		// 使用查询器进行查询,Hit是结果集
		Hits hits = is.search(query);
		long end = new Date().getTime();
		System.err.println("Found " + hits.length() + " document(s) (in "
				+ (end - start) + " milliseconds) that matched query ‘" + q
				+ "’:");
		// 遍历hit结果集
		for (int i = 0; i < hits.length(); i++) {
			// 返回第i个的文档的所有字段
			Document doc = hits.doc(i);
			System.out.println(doc.get("filename"));
		}
	}
}


[/size]
分享到:
评论
5 楼 42087743 2009-07-02  
xsjleilei 写道
你的代码可以运行,嘿嘿。又到了lucene2.4?

lucene的最新版本2.4
4 楼 xsjleilei 2009-06-28  
你的代码可以运行,嘿嘿。又到了lucene2.4?
3 楼 xsjleilei 2009-06-28  
谢谢楼主,又到了lucene2.4,继续探索
2 楼 42087743 2009-06-23  
直接跑main方法就可以了,推荐学lucene2.4,现在学习,1.4已经不适宜了
1 楼 xsjleilei 2009-06-22  
怎么run?看不懂,

相关推荐

    ZendFramework中文文档

    9.4.1.4. Speed up date localization and normalization with Zend_Cache 9.4.1.5. Receiving syncronised timestamps with Zend_TimeSync 9.4.2. Working with Date Values 9.4.3. Basic Zend_Date Operations ...

    DeepSeek入门宝典:赋能开发者实战的高性能AI解决方案

    内容概要:本文档详细介绍了 DeepSeek 这一高效、经济的人工智能解决方案,旨在为企业端、产品端以及开发者提供深度技术支持。对于企业而言,DeepSeek 带来了显著的成本效益和生产效率提升;而对于具体的产品和服务,它增强了用户体验的质量。特别是针对开发者,文档深入浅出地讲解了如何利用 DeepSeek 实现自动化代码生成、改写等辅助开发功能,并且提供了具体的步骤指导以满足不同环境下的部署需求,包括直接通过官方API接入、本地私有化部署或借助云平台进行托管的方式。 适合人群:希望降低开发门槛,提高工作效率的软件工程师和技术团队。 使用场景及目标:开发者可以根据自身条件选择最适合自己的部署方案来整合 DeepSeek 技术,进而达到优化编码过程、减少人为错误的目的。 其他说明:文中还包括了许多实际操作的例子,如通过代码改写的实例来展示如何改进现有程序段落,还有详细的API使用指南帮助初学者快速上手DeepSeek。此外,还提供了大量外部参考资料链接以便进一步扩展知识和技能范围。

    lusted_3cd_01_0318.pdf

    lusted_3cd_01_0318

    开源AI工具下载——Cherry-Studio-1.0.1-MACOS arm64版

    Cherry Studio是一款支持多模型服务的 Windows/macOS GPT 客户端。通过与Ollama搭配,搭建个人本地AI大模型

    chromedriver-win64-136.0.7058.0.zip

    chromedriver-win64-136.0.7058.0.zip

    matlab程序代码项目案例:使用 Simulink 进行自适应 MPC 设计

    matlab程序代码项目案例 【备注】 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用!有问题请及时沟通交流。 2、适用人群:计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、自动化、电子信息等)在校学生、专业老师或者企业员工下载使用。 3、用途:项目具有较高的学习借鉴价值,不仅适用于小白学习入门进阶。也可作为毕设项目、课程设计、大作业、初期项目立项演示等。 4、如果基础还行,或热爱钻研,亦可在此项目代码基础上进行修改添加,实现其他不同功能。 欢迎下载!欢迎交流学习!不清楚的可以私信问我!

    mellitz_3cd_01_1116.pdf

    mellitz_3cd_01_1116

    基于MATLAB的牛顿迭代法实现

    基于MATLAB的牛顿迭代法实现

    steenman_01_0908.pdf

    steenman_01_0908

    [AB PLC例程源码][MMS_047737]System Time 64Bit Interpreted AOI.zip

    AB PLC例程代码项目案例 【备注】 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用!有问题请及时沟通交流。 2、适用人群:计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、自动化、电子信息等)在校学生、专业老师或者企业员工下载使用。 3、用途:项目具有较高的学习借鉴价值,不仅适用于小白学习入门进阶。也可作为毕设项目、课程设计、大作业、初期项目立项演示等。 4、如果基础还行,或热爱钻研,亦可在此项目代码基础上进行修改添加,实现其他不同功能。 欢迎下载!欢迎交流学习!不清楚的可以私信问我!

    stone_3ck_01a_0518.pdf

    stone_3ck_01a_0518

    [AB PLC例程源码][MMS_041473]Input Time Stamping.zip

    AB PLC例程代码项目案例 【备注】 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用!有问题请及时沟通交流。 2、适用人群:计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、自动化、电子信息等)在校学生、专业老师或者企业员工下载使用。 3、用途:项目具有较高的学习借鉴价值,不仅适用于小白学习入门进阶。也可作为毕设项目、课程设计、大作业、初期项目立项演示等。 4、如果基础还行,或热爱钻研,亦可在此项目代码基础上进行修改添加,实现其他不同功能。 欢迎下载!欢迎交流学习!不清楚的可以私信问我!

    lusted_3cd_01_1117.pdf

    lusted_3cd_01_1117

    2010-2023年 上市公司-管理层情感语调数据.zip

    管理层情感语调,或称为管理层语调,是一个在财务与会计领域中常用的概念,特别是在分析上市公司信息披露质量时。它主要指的是管理层在上市公司文字信息披露过程中,用词所体现出的情感倾向和可理解性。 本数据复刻了《财经研究》《中南财经政法大学学报》等顶级期刊的核心解释变量的做法。情感语调对企业未来盈余和未来绩效具有较强解释力、降低会计信息误定价、为分析师预测提供增量信息,而投资者也会对管理层情感语调做出积极反应。 情感语调1=(正面词汇数量-负面词汇数量)/词汇总量;数值越大,情感倾向越偏向正面积极。 情感语调2=(正面词汇数量-负面词汇数量)/(正面词汇数量+负面词汇数量);数值越大,情感倾向越偏向正面积极。 指标 证券代码、企业代码、年份、证券简称、行业代码、行业名称、正面词汇数量、负面词汇数量、词汇总量、句子数量、文字数量、情感语调1、情感语调2。

    mellitz_3cd_02_0318.pdf

    mellitz_3cd_02_0318

    moore_01_0909.pdf

    moore_01_0909

    lusted_3ck_02a_0119.pdf

    lusted_3ck_02a_0119

    pimpinella_3cd_01_0916.pdf

    pimpinella_3cd_01_0916

    [AB PLC例程源码][MMS_041392]Mill feed and Auxilary Control.zip

    AB PLC例程代码项目案例 【备注】 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用!有问题请及时沟通交流。 2、适用人群:计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、自动化、电子信息等)在校学生、专业老师或者企业员工下载使用。 3、用途:项目具有较高的学习借鉴价值,不仅适用于小白学习入门进阶。也可作为毕设项目、课程设计、大作业、初期项目立项演示等。 4、如果基础还行,或热爱钻研,亦可在此项目代码基础上进行修改添加,实现其他不同功能。 欢迎下载!欢迎交流学习!不清楚的可以私信问我!

    li_3ck_03_0919.pdf

    li_3ck_03_0919

Global site tag (gtag.js) - Google Analytics