自动词对齐系统的设计与实现
该系统的构建主要分为两个部分,第一部分是模型的训练,在这个过程中,需要大量双语平行语料进行训练模型的参数;第二部分是求得用户所需要的词对齐结果,对用户输入的双语句对进行处理,然后送入已经训练好的模型中,计算出词对齐的结果。其中在对双语语料进行的数据预处理和用户输入进行的数据预处理是不完全相同的。对于训练语料的预处理,包括对数据的清洗、分词和 subword 处理。对于用户输入进行的预处理,除了分词以外,还包含一些句子的判别,因为,用户的输入有可能会有一些操作性的错误,例如,两个单词之间忘记加空格,还有单词的拼写错误等情况都会有可能存在的,所以在对用于做数据预处理的时候,这些情况都应该去考虑到的
用户评论
推荐下载
-
日语自动词他动词
日语自动词他动词
18 2020-08-09 -
日语自动词与他动词的区别喜欢日语的朋友看看吧
自动词与他动词呦 不明白他俩区别的朋友进来看看吧
33 2019-01-11 -
基于Lex的C_语言自动词法分析器
词法分析就是将用C-minus语言编写好的源程序解析成一个个编译器可以识别的token。基于Lex的C-语言自动词法分析器是由ParserGenerator软件实现的,我所做的只是编写Lex输入文件s
25 2019-05-15 -
一借隐马的源程序VC6.0开发自动词性标注
一借隐马的源程序 VC6.0开发 自动词性标注
31 2018-12-18 -
自动调温系统的设计与实现
自动调温系统的设计与实现
7 2022-07-02 -
动词还原系统
动词还原系统
44 2019-01-14 -
论文研究哈萨克语动词短语自动识别研究与实现.pdf
由于哈萨克语基本动词短语KzBaseVP的组成结构比较复杂,并且存在歧义情况和训练语料规模不够大等问题,所以既不能直接使用基于规则的方法,又不能直接使用基于统计的方法来进行处理。所以提出了一种规则与最
27 2020-07-17 -
Word Excel自动阅卷系统的设计与实现
Word、Excel自动阅卷系统的设计与实现
67 2018-12-20 -
基于XML自动评阅系统的设计与实现
0 引言 实验是培养学生实践能力、创新能力和创新思维的重要环节。考核是对学生学习方法、学习内容的重要引导,也是推进教学质量提高的重要途径。实践能力阅卷系统是一种区别于客观题考试的阅卷系统,它更加注
19 2020-11-08 -
基于Proview的自动加载系统的设计与实现
基于Proview的自动加载系统的设计与实现。
8 2021-04-07
暂无评论