中文分词器热门博客列表 - ITeye博客频道

博客专栏推荐

本月博客排行

年度博客排行

cws_evaluation v1.1 发布，中文分词器分词效果评估对比

cws_evaluation是一个Java开源项目，用于对中文分词器的分词效果进行评估对比，目前支持9大中文分词器。分别是：word分词器、ansj分词器、mmseg4j分词器、ik-analyzer分词器、jcseg分词器、fudannlp分词器、smartcn分词器、jieba分词器、stanford分词器。在1.1中，将9大中文分词器都升级到了最新版本，并采用Maven构建项目，增 ...

cws_evaluation word分词器中文分词器分词效果评估分词效果对比

yangshangchuan 评论(0) 有4576人浏览 2015-05-12 10:19

solr4.3之配置中文分词IK

上一篇讲了使用solr4.3自带的smartcn进行中文分词，这一篇说一下，怎么使用IK进行分词，在这之前先对中文分词的种类介绍一下，目前的中文分词主要有两种 1，基于中科院ICTCLAS的隐式马尔科夫hhmm算法的中文分词器，例如smartcn等。（不支持自定义扩展词库） 2，基于正向迭代最细粒度切分算法（正向最大匹配并且最细分词）例如IK，庖丁等（支持自定义扩展词库）安装分词前，可以去 ...

solr IK 中文分词器

qindongliang1922 评论(2) 有6866人浏览 2013-06-25 15:41

Lucene04---分词器

我们知道，Lucene所做的事情主要就两件，一是创建索引，一是搜索。那么这里就有一个很重要的东西就是分词器，分词器在http://xdwangiflytek.iteye.com/blog/1389308里就提到了，这里再说说，分词器，对文本资源进行切分，将文本按规则切分成一个个进行索引的最小单位（关键词）。建立索引和进行搜索时都要用到分词器，为了保证正确的搜索到结果，在建立索引与进行搜索时使用 ...

Lucene3.5 中文分词器英文分词器

xdwangiflytek 评论(0) 有2128人浏览 2012-02-04 19:12

最近博客热门TAG

Java(141747) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54918) .net(54785) Web(54513) 工作(54116) Linux(50906) Oracle(49876) 应用服务器(43288) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37268) 数据结构(36423)

博客人气排行榜

博客电子书下载排行

>>浏览更多下载