tp3.2搭配scws实现中文分词

1）基于词典的匹配：前向最大匹配，后向最大匹配2）基于字的标注：最大熵模型，条件随机场模型，感知器模型3）其它方法与词性标注结合，与句法分析结合

自己整合的资料。现在还不够完善。有这方面研究的可以一起研究。

主要是一些接口,对中文进行分词,关键词的提取等等。

最好用的分词dll,大家用的开心

计算所汉语词法分析系统ICTCLAS1.0加入一个接口类来处理Unicode文本文件,并提供高频词统计等功能。改进了退出时释放内存较慢的问题。

中文分词

1.5.3——2007-12-05修正大数据量造成的1056数组越界异常1.5.2——2007-10-16增加了地名的匹配修正商品编码数字开头无法匹配的问题1.5.1——200

mmseg中文分词实现的jar包多种分词方法：simplecomplexmaxword等

NULL博文链接：https://java--hhf.iteye.com/blog/2181919

1. 识别率达到85%以上。虽然和专业分词系统相比有一定的差距,但对于中型搜索引擎分词需求而言足够了。2. 对于前后歧义有较好的识别效果。如,成都市场报刊 -- 成都 / 市场 / 报刊中国和服装饰公