java大作业之词频统计

大数据背景下经常需要提取关键词热词，该程序即完成对txt格式的英文内容进行词频统计，并按词频排序生成词频统计列表，通过对单词的预处理忽略'sn't'am“”大小写等形式过滤使程序更为准确

对语料进行词频统计，计算每个词出现的频数，统计出所有词的总数，求和

用python统计词频脚本，nltk使用等。。。

内容（1）从文件中读出一篇英文文章，将不同的单词存入堆中，建立相应的索引表确定各单词在堆中存储的位置及出现的次数。（2）按单词出现的频率递减的次序输出。

python实现mapreduce词频统计执行方式：打开cmd命令，cd到代码所在文件夹，输入pythonwordcout_map.py>words.txt|sort|pythonwordcout_r

C++作业自己写的单词词频统计小程序比较简单

Statistics word frequency practice

Word segmentation and word frequency statistics.rar

专门对汉语词频进行强大分析统计的软件，自带词库，安装即可使用，可自动导出统计结果，并内含人民日报报纸的词频分析，值得下载

在hadoop平台上，用mapreduce编程实现大数据的词频统计