对语音识别进行了探讨，提出一种通过性别识别对连续隐马尔可夫模型（CHMM）分类的方法，在此基础上进行语音识别。首先，通过计算性别判定语音信号的Mel频率倒谱系数（MFCC）使用CHMM对说话人性别进行识别，然后再根据不同性别使用分类CHMM进行语音识别。最后通过实验验证了方法的有效性。