开源中国社区
找到您想要的开源软件,分享和交流 Android客户端 iPhone客户端 开源软件 资讯
软件
当前位置: 开源软件 » 软件分类 » 中文分词库 » IKAnalyzer

中文分词库 IKAnalyzer 98人收藏此软件, / 提醒设置

IKAnalyzer是一个开源的,基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始,IKAnalyzer已经推出 了3个大版本。最初,它是以开源项目Luence为应用主体的,结合词典分词和文法分析算法的中文分词组件。新版本的IKAnalyzer3.0则发展为 面向Java的公用分词组件,独立于Lucene项目,同时提供了对Lucene的默认优化实现。

IKAnalyzer3.0特性:

采用了特有的“正向迭代最细粒度切分算法“,具有60万字/秒的高速处理能力。

采用了多子处理器分析模式,支持:英文字母(IP地址、Email、URL)、数字(日期,常用中文数量词,罗马数字,科学计数法),中文词汇(姓名、地名处理)等分词处理。

优化的词典存储,更小的内存占用。支持用户词典扩展定义

针对Lucene全文检索优化的查询分析器IKQueryParser(作者吐血推荐);采用歧义分析算法优化查询关键字的搜索排列组合,能极大的提高Lucene检索的命中率。

IKAnalyzer中文分词器V3.2.3使用手册.pdf

IKAnalyzer最新更新资讯,共6条  (投递新闻查看所有»)
相关标签 Lucene(10) Paoding(3) DbUtils(1) EhCache(1) 中文分词(1) 文档分享(1) imdict-chinese-analyzer(1) Solr(1) Java(1) mmseg4j(1) Android(1)
Nodesky

IKAnalyzer2012 怎么没有 IKSimilarity 类了?...

Nodesky 发表于2天前

  • 0回答
  • 0投票
  • 23浏览
PZSZLL

lucence Analyzer做分此时扩展词点和停止词的使用...

PZSZLL 发表于2个月前 ,最后回答(7天前):编程小强»

  • 2回答
  • 0投票
  • 148浏览
灵桐

IKAnalyzer配置了扩展词典不管用呢

灵桐 发表于7个月前 ,最后回答(7天前):编程小强»

  • 5回答
  • 0投票
  • 482浏览
道祖

IKAnalyzer对英文的分词处理

道祖 发表于1个月前 ,最后回答(13天前):liushiquan»

  • 3回答
  • 0投票
  • 96浏览
yuwentao

有人知道android上分词方法吗?

yuwentao 发表于20天前 ,最后回答(20天前):虫虫»

  • 1回答
  • 0投票
  • 52浏览
JinFrazer

IKAnalyzer分词时能保留原文中的所有字符,包括标点符号吗...

JinFrazer 发表于26天前 ,最后回答(26天前):JinFrazer»

  • 2回答
  • 0投票
  • 65浏览
程明东

OSChina开源社区的中文分词方案是怎么实现的?

程明东 发表于3个月前 ,最后回答(3个月前):二哥»

  • 2回答
  • 0投票
  • 490浏览
夏可儿

关于Lucene全文检索中分析器Analyzer检索不到单个汉字的问题...

夏可儿 发表于2年前 ,最后回答(4个月前):aokage»

  • 11回答
  • 0投票
  • 1308浏览
王彦豪

关于IK分词器的用法小问题求红薯大哥帮忙看一下是那里的问题。

王彦豪 发表于5个月前 ,最后回答(5个月前):blur»

  • 2回答
  • 0投票
  • 210浏览
fabregasi

IKAnalyzer对扩展字典的数字和字母分词问题

fabregasi 发表于1年前 ,最后回答(6个月前):smart_talk»

  • 3回答
  • 0投票
  • 569浏览
aimuke

请教一个Solr+IKAnalyzer的搜索问题

aimuke 发表于1年前 ,最后回答(6个月前):.....»

  • 9回答
  • 0投票
  • 914浏览
张剑波

IKAnalyzer.net现在到什么版本了?请问在哪能下载最新版本?...

张剑波 发表于7个月前

  • 0回答
  • 0投票
  • 103浏览
灵桐

使用IKAnalyzer分词器的接口loadExtendWords的问题...

灵桐 发表于7个月前 ,最后回答(7个月前):灵桐»

  • 3回答
  • 0投票
  • 179浏览
无鸯

在使用 IKAnalyzer 时碰到了死循环的异常,会是什么原因导致呢...

无鸯 发表于7个月前 ,最后回答(7个月前):罪恶的花生»

  • 1回答
  • 0投票
  • 90浏览
灵桐

IKAnalyzer可以使用不同的配置文件吗?

灵桐 发表于7个月前 ,最后回答(7个月前):灵桐»

  • 3回答
  • 0投票
  • 170浏览
红薯

OSChina底层数据库操作的类(QueryHelper)源码...

红薯 发表于2年前 ,最后回答(8个月前):谢志鹏»

  • 62回答
  • 1投票
  • 8704浏览
RereMouse

IKAnalyzer不能识别中英文组合的词组吗?

RereMouse 发表于11个月前 ,最后回答(10个月前):junming»

  • 1回答
  • 0投票
  • 308浏览
fk37

IKAnalyzer版本替换

fk37 发表于1年前 ,最后回答(1年前):fk37»

  • 3回答
  • 0投票
  • 204浏览
冰封情

我想问的是这个IKAnalyzer必须和lucene搭配吗?能否独立进行分...

冰封情 发表于1年前 ,最后回答(1年前):苕»

  • 16回答
  • 0投票
  • 875浏览
陈雅倩

IKAnalyzer支持未登录词的分词吗??

陈雅倩 发表于1年前 ,最后回答(1年前):陈雅倩»

  • 2回答
  • 0投票
  • 229浏览
更多IKAnalyzer的问题 »
linliangyi 作者:@linliangyi
给作者留言 我要提问/分享
已发布:)

显示所有 » 共有17个类似软件