融入汉字字形特征的神经机器翻译模型研究

来源 :苏州大学 | 被引量 : 0次 | 上传用户:cqnc4444
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
神经机器翻译(NMT)凭借模型简单、通用及翻译性能突出的特点,自2014年提出以来,迅速成为机器翻译领域研究的热点。原始的神经机器翻译系统以端到端的方式简单地对纯文本进行建模,忽略了语言学知识。为此,很多学者尝试将单词词性、依存句法等语言特征融入NMT模型,并取得了不错的成果。这些工作证明了虽然NMT对纯文本具备很强的学习能力,但是融入额外的语言特征依然能够起到促进作用。汉字是唯一现存的有着数千年发展历史的语言文字。古汉字如甲骨文、钟鼎铭文等具有“因物赋形”、“依类象形”的特点,这样,即便不识汉字、不懂汉语的人,见到这些像画一样的文字,也能大概明白它的含义。现代汉字虽然不再“以形通物”,但仍然保持着原来的字音和字义,且在长期的运用过程中,形、音、义早已融合,形成三位一体。既然汉字字形本身含有丰富的语音、语义信息,那么在翻译模型中融入汉字字形可能是一种提升NMT翻译性能的有效办法。为此,本文开展了融入汉字字形特征的神经机器翻译模型研究。本文主要包含以下三个方面:(1)融入汉字字形特征的字符级神经机器翻译。每一个汉字都有其对应的字体形状,而字体形状又可用字形向量进行数字化表示。在该工作中,我们使用拼接法从汉字的点阵图像中获取相应的字形特征,并设计了两种不同的字形特征融合方法,分别是辅助学习法以及部分替代法。我们在中英翻译任务上进行了实验,结果表明,以辅助学习法的方式将汉字字形特征融入字符级神经机器翻译可以较大幅度地提升译文质量。(2)融入汉字字形特征的单词级神经机器翻译。单词通常由不等数量的字符构成,因而无法像字符那样直接获得对应的字形向量。在该工作中,我们利用长短期记忆网络学习单词的字形向量表征。除此之外,我们还利用卷积神经网络从汉字的点阵图像中提取相应的字形特征。两种方法加上前一项工作中所提的辅助学习法,较之于基准系统,模型在翻译性能上取得了较大的提升。(3)融入汉字字形特征的字符-单词混合模型的神经机器翻译。在该工作中,我们改进了完全基于字符的词向量生成模型,并结合汉语的语言属性,提出了未登录词分解模型。除此之外,我们使用与前两项工作相同的方法,将汉字字形特征融入翻译模型。实验结果表明,汉字字形特征能够对字符-单词混合模型的神经机器翻译起到促进作用。
其他文献
隐喻已经不仅仅是一种修辞手法,更是一种思考和行为的方式。因此隐喻在外语学习中发挥着重要作用。然而如何将隐喻应用到外语教学中的研究还不够深入,通过隐喻教学提高隐喻输
<正> 近年来,在党中央大力倡导下,落实教育战略地位,加大对教育的资金投入,逐渐得到各级政府和社会各界的重视,国家财政性教育经费有了较大幅度提高。但是,也存在着不可忽视
内蒙古自治区作为我国北部边疆少数民族地区,拥有丰富的资源和独特的民族文化风貌,如何做好内蒙古城市宣传片的传播内容与形式显得尤为重要。《亮丽内蒙古》是2013年内蒙古广
三角形和二次函数两块内容的综合是初中数学最突出的综合内容。本文通过确定直角三角形在直角坐标系中的位置、特征,介绍题型,剖析解法,对"K"-型图相似三角形在二次函数中的
<正>2013年是中央作出实施东北地区等老工业基地振兴战略重大决策10周年。一年来,我们认真研究谋划,扎实推进各项工作,努力把东北地区等老工业基地振兴工作推向新的历史阶段
目的:探讨毛发上皮瘤临床及病理改变特点。方法:收集23例毛发上皮瘤标本,所有标本均用4%甲醛溶液固定,常规组织脱水、石蜡包埋、切片、HE染色,分析总结其临床病史及病理改变特点。
目的:对口腔鳞状细胞癌患者颈部淋巴结进行纳米炭混悬液示踪染色,术后记录颈淋巴结清扫数目及转移情况并与未行示踪染色的患者进行对比,探讨纳米炭混悬液对颈淋巴结示踪的有效性。方法:选取我院2017年3月-2018年9月期间入院治疗的满足入组标准并行相同术式的口腔鳞状细胞癌患者共计66例。按照住院先后顺序随机分为纳米炭示踪组(实验组)32例和常规手术组(对照组)34例。实验组所有病例术前1天注射纳米炭混悬
在文化自信的背景下,中国革命传统文化亟需传承弘扬、革命传统教育有待加强,而语文教科书中的“红色经典”作品成为革命传统文化的重要载体以及革命传统教育渗透的范本。部编本初中语文教科书关于“红色经典”作品的编制是对其他版本“去革命化”编排的有力回击,同时“红色经典”作品激发历史与时代的强音,将历史记忆与现实语境的冲击张力映射到“红色经典”作品教学中,呈现出思想政治教育倾向和革命历史时空隔膜等问题,因此回
<正>在初中数学教学中,数形结合思想在二次函数中有着广泛的运用.学生通过解决"一元二次方程ax2+bx+c=0的实根与二次函数y=ax2+bx+c的图像同x轴交点的关系"、"二次函数y=ax2+
目前,国内外教育教学研究领域逐渐提升对学生核心素养的研究深度,共同关注核心素养形成与发展对学生个体成长、国家与社会改革发展中人才结构优化等方面的重要作用。核心素养教育理念倡导、注重对学生思想品格、能力素质、价值观与人生观塑造等方面的培养,这一教育理念逐渐成为当前国内外教育界普遍认可的教育管理方向。在核心素养教育理念指导下,各级学校的教学工作、育人教育迎来了全新的机遇和挑战。初中美术教育的重要途径之