基于视觉的手势识别是实现新一代人机交互的关键技术。通过手势识别向屏幕输入文字以供搜索查找的系统基本没有，在现有的手势识别基础上，利用汉语字母和数字对应的手语作为输入手势，采用微软的kinect获取深度图像，对其进行手势分割。通过Canny算法提取手势的边缘，利用小波矩提取特征，得到手势字母，实现了具有手势识别以及基于文字输入功能的系统。实验表明该系统能够准确有效地实现汉字的输入。