一个简单的词法分析器,可以读取文件,然后进行词法分析,会处理各种字符,会提示错误。