`
zhanshenny
  • 浏览: 267002 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

IKAnalyzer介绍

ikanalyzerlucene全文检索 
阅读更多
IKAnalyzer是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始，IKAnalyzer已经推出了3个大版本。最初，它是以开源项目Luence为应用主体的，结合词典分词和文法分析算法的中文分词组件。新版本的IKAnalyzer3.0则发展为面向Java的公用分词组件，独立于Lucene项目，同时提供了对Lucene的默认优化实现。
IKAnalyzer3.0特性:

采用了特有的“正向迭代最细粒度切分算法“，支持细粒度和最大词长两种切分模式；具有83万字/秒（1600KB/S）的高速处理能力。

采用了多子处理器分析模式，支持：英文字母、数字、中文词汇等分词处理，兼容韩文、日文字符

优化的词典存储，更小的内存占用。支持用户词典扩展定义

针对Lucene全文检索优化的查询分析器IKQueryParser(作者吐血推荐)；引入简单搜索表达式，采用歧义分析算法优化查询关键字的搜索排列组合，能极大的提高Lucene检索的命中率。

http://code.google.com/p/ik-analyzer/
分享到：
| Lucene Scoring 评分机制[转]
评论
发表评论

您还没有登录,请您登录后再发表评论

相关推荐

    ElasticSearch+IKAnalyzer整合版 解压即用

    **二、IKAnalyzer介绍** IKAnalyzer是一款开源的中文分词器，最初设计用于Solr，但后来也被广泛应用于Elasticsearch。它支持多种分词模式，包括精确模式、全模式、快速模式以及自定义词典。IKAnalyzer的优势在于其...

    solr6.x的IKAnalyzer配置智能分词

    1. **IKAnalyzer介绍**：IKAnalyzer是基于Java实现的，主要设计目标是提高分词的准确性，同时具备良好的可扩展性。它支持自定义词典和动态加载，能够处理网络新词和专业术语。 2. **Solr 6.6**：Solr 6.6是Solr的一...

    Lucene的IK Analyzer 3.0 中文分词器 全解

    - 分词器能够准确识别并处理各种文本，例如在一段介绍IK Analyzer的文字中，它能够正确将“IKAnalyzer”拆分为“ik-analyzer”，同时处理日期、版本号等非标准格式的词汇。 - 在处理公司名称时，如“永和服装饰品...

    IKAnalyzer中文分词器 java

    1. **IKAnalyzer的介绍** IKAnalyzer是一个基于Java实现的全文检索分析器，主要目标是为Java开发人员提供一个简单、易用的中文分词组件。它的设计思想是灵活和可扩展，支持自定义词典和热更新，使得用户可以根据...

    IKAnalyzer2012_u1.zip

    3. **IKAnalyzer中文分词器V2012使用手册.pdf**：这份手册详细介绍了IKAnalyzer的安装、配置、使用方法以及API接口，对于初学者和开发者来说是非常有价值的参考资料。 4. **LICENSE.txt**和**NOTICE.txt**：这两个...

    Lucene5.21+IkAnalyzer

    本文将详细介绍如何使用Lucene 5.21版本结合IkAnalyzer 2012_V5进行文本分析和全文搜索的入门实践。 首先，让我们了解Lucene。Lucene是Apache软件基金会的一个开源项目，它是一个高性能、全文检索库，提供了强大的...

    IKAnalyzer

    **IKAnalyzer的介绍** IKAnalyzer，全称为“Intelligent Chinese Analyzer”，是由刘海洋发起的开源项目，最初设计目标是为了提供一个简单、高效、可扩展的中文分词解决方案。该工具主要基于Java语言开发，支持...

    IKAnalyzer中文分词器V3.1.1使用手册

    IKAnalyzer 3.1.1 介绍 IKAnalyzer是一个基于Java语言开发的开源轻量级中文分词工具包。自2006年12月发布1.0版本以来，IKAnalyzer已经经历了多个版本的迭代，不断地完善其功能并提升性能。最初，它作为开源项目...

    Solr java IKAnalyzer词库

    3. **IKAnalyzer中文分词器V2012_FF使用手册.pdf**：这是IKAnalyzer的使用手册，详细介绍了如何配置和使用该分词器，包括安装、配置Solr以及自定义词典等操作。 4. **LICENSE.txt** 和 **NOTICE.txt**：分别包含了...

    IKAnalyzer 2012FF_u1

    4. **IKAnalyzer中文分词器V2012_FF使用手册.pdf**：这份文档详细介绍了IKAnalyzer的使用方法、配置步骤以及可能遇到的问题和解决方案，是开发者学习和使用该工具的重要参考资料。 5. **doc**：这是一个目录，可能...

    IKAnalyzer2012分词.zip

    下面将详细介绍IKAnalyzer2012的相关知识点。 1. **IKAnalyzer概述**： - IKAnalyzer是由北京大学信息科学技术学院的研究人员开发的一款开源项目，它的全称是"IntelligentKeyword Analyzer"。 - 主要功能是为中文...

    ikanalyzer-solr

    在Solr中集成IK Analyzer，首先需要下载ikanalyzer-solr的压缩包，其中包含了IK Analyzer的jar包以及相应的配置文件。在Solr的`lib`目录下添加ikanalyzer的jar文件，确保Solr启动时能加载到该分词器。同时，还需要在...

    原版_IK_Analyzer _2012_FF_hf_1

    4. **使用手册**：IKAnalyzer中文分词器V2012_FF使用手册.pdf详尽介绍了如何安装、配置和使用该分词器，为开发者提供了清晰的指导。 5. **许可与通知**：LICENSE.txt和NOTICE.txt文件分别包含了软件的许可协议和相关...

    IKAnalyzer 3.0 中文分词器

    1.IKAnalyzer3.0介绍 IKAnalyzer是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始，IKAnalyzer 已经推出了3个大版本。最初，它是以开源项目Luence为应用主体的，结合词典分词和...

    IKAnalyzer中文分词器V2012使用手册_20190806.pdf

    在使用指南方面，提供了IKAnalyzer的下载地址，同时介绍了IK分词器与Lucene和Solr的版本兼容情况。例如，IK分词器版本3.1.3GA及先前版本兼容Lucene 2.9.1及之前版本，而3.1.5GA及之后的版本则兼容Solr 1.3和1.4。IK...

    IKAnalyzer 2012

    **IKAnalyzer中文分词器V2012_FF使用手册.pdf** 是用户指南，详细介绍了如何安装、配置和使用IKAnalyzer 2012FF_hf1版本。手册通常会包含以下内容： 1. **安装与配置**：解释如何将IKAnalyzer添加到项目中，包括...

    IKAnalyzer-5.0.jar+solr-analyzer-extra-5.3.jar

    本篇将详细介绍IKAnalyzer-5.0.jar和solr-analyzer-extra-5.3.jar这两个Solr的IK分词器组件及其功能。 首先，IKAnalyzer-5.0.jar是IK分词器的主要核心库，由开源社区维护和更新。这个版本的IKAnalyzer支持词典动态...

    IKAnalyzer中文分词器V2012_U5使用手册

    IKAnalyzer2012介绍 IKAnalyzer是一款基于Java语言开发的开源中文分词工具包，自2006年12月发布1.0版以来，已历经多次重大升级。最初作为Lucene的附属组件，它结合了词典分词和语法分析算法，旨在提高中文文本处理...

    IKAnalyzer中文分词器v2012使用手册.pdf

    文档内容详细地介绍了IKAnalyzer中文分词器的每一个版本的特性和升级细节，对分词效果进行了示范，并提供了详尽的使用说明，对于希望在Java环境下进行中文文本分词的开发者来说，是一个不可或缺的参考资料。通过IK...

    IKAnalyzer2012FF_u1.zip

    IKAnalyzer2012FF_u1.zip 是一个包含IK Analyzer 2012FF_u1版本的压缩包，它是基于Java实现的全文检索分析器，主要用于中文分词处理。中文分词是自然语言处理中的重要步骤，对于搜索引擎、信息检索系统、文本挖掘等...

Magicbox
Global site tag (gtag.js) - Google Analytics