最新中文分词工具的词库

关于中文的分词技术的一些研究和概述

<% a=”日本是中国的一个省|我们美丽中国的张家界!” b=”中国,我们,张家界,日本,美国,苹果” b=split(b,”,”) a=split(a,”|”) for

论文课题，挺好的，内含文字和图片，分享给大家。

特整理中文停止词如下，方便开发。中文文本分词中先参考了官方给出的示例，官方给出的示例主要是对一条文本进行全分词和精确分词。

一般的自然语言处理和文本挖掘项目中最常用的敏感词库

点讯最新词库

2017最新敏感词库，分为色情、暴力、反动、贪腐、民生、其他几个大类，还有各个网站上使用的敏感词列表。

可以通过该工具，对盘古分词的词库进行升级，添加自己想要的词

分词工具

Version2.0.4–alpha2通过analyzer.bat程序，可以输入中文文本，即时地查看分词效果。Jar包在lib文件夹中。本人倡导零分资源共享，欢迎大家下载和评论。