基于隐马尔科夫模型的分词 使用隐马尔科夫模型(HiddenMarkovModel,HMM)进行分词,并与基于词典的正向最大匹配算法和工业界使用的jieba分词进行对比。采用最大似然估计的方法从带标记样本学习模型参数,并通过维特比算法进行解码。
基于隐马尔科夫模型的分词 使用隐马尔科夫模型(HiddenMarkovModel,HMM)进行分词,并与基于词典的正向最大匹配算法和工业界使用的jieba分词进行对比。采用最大似然估计的方法从带标记样本学习模型参数,并通过维特比算法进行解码。
生成Python代码控制流图 Python开发的生成Python代码控制流图的小工具。 原理:将源代码解析为AST,遍历AST生成结构化字符串,最后解析结构化字符串得到控制流图。 使用:python CFG.py src [-o dir] 工具扫描src文件所有函数并在dir目录下生成控制流图,缺省为当前工作目录。