基于LSTM与槽填充的对话管理模型研究与应用

来源 :哈尔滨理工大学 | 被引量 : 0次 | 上传用户:meisck
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着机器学习的发展,人机对话领域相关的技术取得极大的突破,近年来,许多成熟的人机对话系统已经实现了产品落地并在人们生活中逐渐普及,如微软小冰、siri以及小度机器人等。任务型人机对话系统主要由语音识别,自然语言处理,对话管理、自然语言生成以及语音合成五个模块组成,对话管理控制着整个对话过程的逻辑,相当于对话系统的大脑,主要负责对话状态追踪、槽位填充、上下文建模、指代消减和省略补充等任务。本文在槽位填充和对话状态追踪任务上开展了研究工作。在槽位填充任务中,本文提出了一种基于改进BILSTM(Bidirectional Long Short-Term Memory,双向长短时记忆网络)+CRF(Conditional Random Field,条件随机场)的槽模型来完成槽值填充任务,新模型在BILSTM+CRF模型的输入层加入了依存句法分析模块,通过学习句子中的词性、语法等特征,提升槽位填充的准确率,实验表明,新模型在训练数据较少的情况下对槽位填充效果提升更明显。在对话状态追踪任务中,本文提出了一种基于LSTM(Long Short-Term Memory,长短时记忆网络)的状态追踪模型,该模型通过层级建模的方式将口语理解和对话状态追踪模型联合起来,从而减少了口语理解错误导致的误差传递,模型的输入为ASR(Automatic Speech Recognition,自动语音识别)结果,针对训练过程中出现的未见槽值的问题,本文在状态追踪模型的上层中引入了注意力模型,通过计算用户文本特征向量与槽值之间的余弦相似度来确定新槽值,在保障普通槽值准确率的基础上缓解了未见槽值的问题。最后,本文将所提出的模型应用到实际的订餐任务中,设计并实现一个基于餐厅预订任务的智能对话系统,并将它与微信公众号对接,通过对餐厅预订任务的功能演示,来验证本文所提出的基于改进BILSTM+CRF模型和基于LSTM状态追踪模型在现实应用的可行性。
其他文献
在临床诊断与医学研究中,血管是十分重要的生物组织。视网膜血管是人体仅有的能直接进行观察的血管网络,作为眼底图像的重要特征,其结构和形态的改变与高血压、糖尿病、动脉
近年来,随着机器学习技术的飞速发展,人脸识别在准确度和速率等方面有了很大突破,一些最新的研究成果,如FaceNet、DeepFace、DeepID等,其准确率已经接近甚至超过了人类识别的
端到端的基于神经网络的方法是目前图像标题(Image Caption)任务的主流方法。目前大部分研究都集中于单一语言(如英文)的图像标题研究,并取得了很好的性能。但是在很多时候,
随着互联网技术不断发展,学术成果不断涌现,学者们可以使用各种分析方法来挖掘学术成果之间的隐藏关系,并探索学术合作的规律。其中,学术合作关系的分析逐渐成为研究热点,对
目的:c-Maf在50%以上的多发性骨髓瘤(Multiple myeloma,MM)细胞中高表达,通过其下游靶基因及与其他信号因子的相互作用促进MM的发生和恶性进展,与MM的化学耐药、临床恶变和不良预后密切关联。我们前期研究表明,去泛素化酶USP5通过稳定c-Maf蛋白从而促进MM细胞增殖和存活,表明USP5/c-Maf轴可能成为多发性骨髓瘤治疗的潜在靶点。本文建立了一个基于USP5/c-Maf的
社交媒体的发展改变了用户理解和跟踪现实世界中的事件的方式。在社交媒体上,用户可以上传并分享与这些这些事件相关的内容,例如文本、图像、视频等多种模态的信息。大量的信
本文研究周期演化区域上的种群动力学行为,主要研究区域的周期演化对种群动力学行为的影响.所谓的周期演化区域是指区域随时间周期变化的.首先,本文研究周期演化区域上的Logi
目的:研究二肽重复蛋白Poly-GR和Poly-PR对细胞自噬通路的影响,并探索其影响的作用机制。方法:体外培养 HEK 293,HEK 293T,ATG5-KO MEF 以及 ATG5-WT MEF 等细胞系作为工具;用RNAiMax做为转染试剂,转染目的基因的siRNA,构建Beclin1基因缺陷的细胞模型;用Lipofectamine 2000转染质粒,在细胞中过表达相应的目的蛋白,构建细胞
目的:监测新生儿万古霉素的血药浓度,分析影响血药浓度的因素以指导临床合理用药。方法:选取2016年9月~2019年5月入住无锡市妇幼保健院新生儿科病房使用万古霉素进行治疗,并纳入标准的患儿43例。采用FLC全自动二维高效液相色谱分析系统进行万古霉素血浆药物浓度测定。在第五次给药前半小时的血药浓度设定为谷浓度,第五次给药结束后一小时的血药浓度设定为峰浓度。谷浓度在10~20μg·mL-1范围内的为用
研究背景与目的:寨卡病毒(Zika virus,ZIKV)是一种虫媒传播病毒,主要通过伊蚊叮咬进行传播。由ZIKV感染引起的疾病大多数都较轻微并且是自限性的,但寨卡病毒感染也有可能造成患者严重的神经和自身免疫系统的并发症,如胎儿小头畸形和格林-巴利综合征(Guillain-Barre syndrome)。目前仍无疫苗和特效药物用于预防或治疗寨卡病毒感染。随着寨卡病毒在多个国家和地区的爆发及传播,急