文档名：子字粒度切分在蒙汉神经机器翻译中的应用
在蒙汉神经机器翻译任务中,由于语料稀少使得数据稀疏问题严重,极大影响了模型的翻译效果.本文对子字粒度切分技术在蒙汉神经机器翻译模型中的应用进行了研究.通过BPE算法将切分粒度控制在字符和词之间的子字粒度大小,将低频词切分成相对高频的子字片段,来缓解数据稀疏问题,从而在有限的数据和硬件资源条件下,更高效的提升模型的鲁棒性.实验表明,在两种网络模型中使用子字粒度切分技术,BLEU值分别提升了4.81和2.96,且随着语料的扩大,训练周期缩短效果也越显著.实验证明了,子字粒度切分技术有助于提高蒙汉神经机器翻译效果.
作者：任众侯宏旭吉亚图武子玉白天罡雷颖
作者单位：内蒙古大学计算机学院,内蒙古自治区呼和浩特,010021
母体文献：第十七届全国计算语言学学术会议暨第六届基于自然标注大数据的自然语言处理国际学术研讨会(CCL2018)论文集
会议名称：第十七届全国计算语言学学术会议暨第六届基于自然标注大数据的自然语言处理国际学术研讨会(CCL2018)
会议时间：2018年10月19日
会议地点：长沙
主办单位：中国中文信息学会
语种：chi
分类号：
关键词：神经机器翻译 蒙古语 汉语 子字粒度切分
在线出版日期：2021年9月13日
基金项目：
相似文献
相关博文
- 文件大小:
- 622.93 KB
- 下载次数:
- 60
-
高速下载
|
|
