【摘 要】
:
为了解决多模态数据中数据样本不平衡的问题,利用资源丰富的文本模态知识对资源贫乏的声学模态建模,构建一种利用辅助模态间相似度监督训练的情绪识别神经网络。首先,使用以
【基金项目】
:
中国教育部人工智能协同育人项目(201801003011),河北科技大学校立课题(82/1182108)
论文部分内容阅读
为了解决多模态数据中数据样本不平衡的问题,利用资源丰富的文本模态知识对资源贫乏的声学模态建模,构建一种利用辅助模态间相似度监督训练的情绪识别神经网络。首先,使用以双向门控单元为核心的神经网络结构,分别学习文本与音频模态的初始特征向量;其次,使用SoftMax函数进行情绪识别预测,同时使用一个全连接层生成2个模态对应的目标特征向量;最后,利用该目标特征向量计算彼此之间的相似度辅助监督训练,提升情绪识别的性能。结果表明,该神经网络可以在IEMOCAP数据集上进行情绪4分类,实现了82.6%的加权准确率和81.
其他文献
从公司内部治理和外部市场两个角度,同时考察大股东机会主义和投资者情绪如何通过影响定向增发折价进而造成股东间的财富转移,研究发现:大股东机会主义的存在会促使大股东通
语文教学效率低下这似乎成了一个不争的事实。如何提高语文课堂教学的效率,尽管仁者见仁,智者见智。大家提出了许多理论主张,打出了各种旗号。比如正道语文,青春语文,生活化语文等
西方评论界把品特早期和中期的戏剧创作多称为"威胁喜剧".威胁是品特对世界的基本性认识,也是其戏剧创作的重要主题."威胁喜剧"是品特对戏剧艺术的独特贡献.用比较分析的方法
1.创建活动的背景$$近年来,福建省委省政府高度重视全民健身事业,成立了以省政府分管领导为组长,34家省直单位和10地市(区)为成员单位的省全民健身工作领导小组,把体育场地设施建设
目的探讨对会阴侧切伤口进行电磁波治疗器理疗的疗效。方法将180例产科会阴侧切患者随机分为实验组和对照组各90例。实验组会阴侧切48 h后采用电磁波治疗器照射治疗,对照组采
穿心莲内酯(Andrographolide)是爵床科植物穿心莲(Andrographis paniculata(Burm.f.)Nees)中提取得到的二萜内酯类化合物,是中药穿心莲的主要成分之一,具有清热解毒、凉血消肿等功能,现
脱钙骨经冰冻切片后进行HE染色的体会雷安富第三军医大学重庆630038骨标本的制作分不脱钙的磨片和经脱钙后再行火棉胶或石蜡包埋切片。由于脱钙骨用火棉胶或石蜡包埋切片周期长,所用试