【摘 要】
:
不同于纯文本的情绪分析,本文面向多模态数据(文本和语音)进行情绪识别研究。为了同时考虑多模态数据特征,提出一种新颖的联合学习框架,将多模态情绪分类作为主任务,多模态情
【基金项目】
:
国家自然科学基金(61331011,61375073)资助
论文部分内容阅读
不同于纯文本的情绪分析,本文面向多模态数据(文本和语音)进行情绪识别研究。为了同时考虑多模态数据特征,提出一种新颖的联合学习框架,将多模态情绪分类作为主任务,多模态情感分类作为辅助任务,通过情感信息来辅助提升情绪识别任务的性能。首先,通过私有网络层对主任务中的文本和语音模态信息分别进行编码,以学习单个模态内部的情绪独立特征表示。接着,通过辅助任务中的共享网络层来获取主任务的辅助情绪表示以及辅助任务的单模态完整情感表示。在得到主任务的文本和语音辅助情绪表示之后,分别与主任务中的单模态独立特征表示相结合,得到
其他文献
目的评估内镜超声检查(EUS)对于胆囊结石患者在行腹腔镜胆囊切除术(LC)术前排除胆总管下段良性疾病的价值。方法回顾性分析我院从2004年1月至2008年1月患有胆囊结石并行LC的住院
目的对2011–2016年江苏省苏州市分离于患者、健康人群和密切接触者的脑膜炎奈瑟菌(Nm)进行血清群鉴定,了解苏州市Nm的血清群及遗传进化关系。方法采用乳胶凝集和多位点序列
通过10种杀虫剂对小菜蛾幼虫和小菜蛾绒茧蜂成虫的室内毒力测定试验,结果表明∶印楝素、阿维菌素、功高、锐劲特和除尽对小菜蛾具有较高的毒力,其中印楝素的毒力最高,其LC50
环境民事公益诉讼请求权基础的三条表达径路均存在缺陷:《侵权责任法》第65条张力不足,《环境保护法》第5条和第6条第3款过于粗糙,《关于审理环境民事公益诉讼案件适用法律若
在生态环境建设的宏观背景下,加快培育森林、提升森林覆盖率刻不容缓。基于此,在明确森林培育重要价值的基础上,提出了一些主要的森林培育措施。
目的评价应用关节镜清理+胫骨高位截骨钢板内固定治疗青年膝内翻型骨关节炎的临床疗效。方法26例36膝青年性膝内翻患者行关节镜清理+胫骨高位截骨钢板内固定术。年龄18~35岁,平均
以双层柱壳结构在脉冲载荷下的抗冲击问题为例,用量纲分析法得出了可简化为平面应变问题的柱壳在冲击载荷下的瞬态响应所依赖的主要无量纲自变量,并建立相应的计算模型,通过
PTEN是一种抑癌基因表达蛋白,具有双特异性磷酸酶活性,参与多种信号途径的调节。PTEN活性的缺失与人类多种疾病相关,特别是在肿瘤的发生上极为常见。近年来,研究人员对PTEN的
【目的】通过研究STK1与附着胞发育的关系,明确附着胞发育过程中STK1对糖原和脂肪合成的调控作用,为阐明玉米大斑病菌(Setosphaeria turcica)附着胞发育的分子机制打下基础。【
现在一般都认为,启发式是教学思想,而且是运用教学方法的指导思想,不是具体的教学方法.我们认为,虽然启发式不是某种具体的教学方法,但它具有方法论的意义,是教学的一般方法