Java分布式中文分词组件word分词v1.2发布
程序员文章站
2022-03-12 08:39:51
...
word分词是一个Java实现的分布式的中文分词组件,提供了多种基于词典的分词算法,并利用ngram模型来消除歧义。能准确识别英文、数字,以及日期、时间等数量词,能识别人名、地名、组织机构名等未登录词。同时提供了Lucene、Solr、ElasticSearch、Luke插件。
自1.0之后,在1.1和1.2中,word分词有了重大改进,优化了分词算法、利用多线程提升分词速度、支持分布式、支持资源变化自动检测、新增了全切分算法、支持三元模型、支持Luke插件、增加gradle支持等等,同时,word1.2支持最新的ElasticSearch1.5.1、Lucene4.10.4、Solr4.10.4以及Luke4.0。
更多细节请查看:word分词主页
word分词的分词效果怎么样?请看:Java开源项目cws_evaluation:中文分词器分词效果评估
下一篇: jsFiddle:在线Shell编辑器