【摘 要】
:
随着人工智能技术的不断发展,越来越多的智能技术应用在人们生活的各个方面。如何智能识别人的情绪变化,是一个很具有挑战难度的技术。因为人的情绪表现方式多种多样,而且人脸表情、说话声音、不同语言等表现方式中体现情绪变化的特征也变化多端。目前单一的通过一种模态数据来识别人的情绪算法层出不穷,算法应用也体现在各个方面。但是,单一模式的情绪识别并不符合人们情绪表达方式,且容易受到其他不可避免的外界因素影响,情
论文部分内容阅读
随着人工智能技术的不断发展,越来越多的智能技术应用在人们生活的各个方面。如何智能识别人的情绪变化,是一个很具有挑战难度的技术。因为人的情绪表现方式多种多样,而且人脸表情、说话声音、不同语言等表现方式中体现情绪变化的特征也变化多端。目前单一的通过一种模态数据来识别人的情绪算法层出不穷,算法应用也体现在各个方面。但是,单一模式的情绪识别并不符合人们情绪表达方式,且容易受到其他不可避免的外界因素影响,情绪分析系统性能不高,所以目前利用特征融合、模型融合、决策融合技术提出将多个模态信息结合在一起进行分析的情绪分析算法,因此利用多模态情绪分析算法将情绪识别应用从单一模态转移到结合多种模态进行识别分析,是具有实际价值的。所以本文应用多模态情绪分析技术设计实现了一个更加符合实际、准确性更高的情绪分析系统。本文从系统的需求分析、架构设计、具体实现、系统测试四个方面完整设计实现了一个多模态情绪识别系统。该系统可以使用文本、语音、视频文件三种模态的数据,调用相应的算法模块进行单、多模态的情绪分析。系统从功能角度上分析,包含三大模块,数据模块、算法模块、展示模块。1、数据模块实现了数据信息的采集,包括用户信息、模态情绪数据,用户只要通过登录注册、点击文件上传,就可以完成数据采集,简化用户操作流程,提高系统的可操作性;利用数据预处理将文本、语音、视频三种模态的数据处理成符合算法模型输入数据的格式数据,简化了模型调用中处理数据的过程,提高系统的灵活性;利用数据管理将用户信息、用户上传的原始数据、以及各种模态特征数据进行统一管理保存,定义了数据增删查改的方法,方便各个模块的数据调用,实现了数据的持久化。2、算法模块实现了两种情绪识别算法,可供用户灵活选择,直观感受多模态情绪分析算法的优越性。本文选用的两种算法,在进行模型训练测试时,取得了准确性为83%的较好的情绪分析效果,表明算法能够很好地解决情绪分类问题,提高了系统的可靠性。算法调用完成以后,生成情绪分析结果文件,以供前端模块进行可视化展示。3、展示模块利用数据流式传输实现了多媒体数据的展示,优化了系统性能、以图表形式动态展示情绪分析结果,提高了用户体验。本文最后对系统进行了功能和性能测试,测试结果验证了系统各个模块之间能够相互协调工作,证实了系统能够在情绪识别上的准确性、可靠性,能够稳定持续的完成情绪分析的任务。
其他文献
肺癌是全世界死亡率最高的癌症之一,使用图像处理技术去研究肺癌诊断有很重要的现实意义。传统的方法是基于肺部CT图像分割,人工肉眼查看肺部CT进行诊断检测。近年来图像处理技术广泛应用于肺癌识别,尤其是深度学习的不断发展,利用深度学习自动识别肺癌将为放射科医生节省大量时间、诊断更加经济实惠。通常检测肺癌的通用方法是先对肺部分割,接下来特征检测识别。本文针对肺部CT图像分割、识别中肺结点区域类型结构复杂多
皮肤癌是一个人类需要克服的重大公共健康问题,全球每年有超过五百万新诊断病例。在2015年,全球黑色素瘤发病率超过35万例子,死亡人数近6万人。尽管死亡率很高,但早期发现时,黑色素瘤存活率超过95%。通常皮肤科医生通过肉眼观察和组织病理学活检的方法对黑色素瘤进行早期的筛查和确诊[1]。但是,即使是有经验的专家仅凭肉眼诊断也存在较高的误诊,导致了很多不必要的病理学活检。病理学活检虽然是诊断金标准,但常
随着移动互联网和社交媒体的不断发展,政府和企业对海量数据的存储和管理需求也急速增长。由于单节点数据管理系统存在严重的单点失效问题,同时也缺乏对海量数据的管理能力,
微分方程数值解法在工程技术和科学计算等领域中的应用十分广泛,有限差分法、有限元方法和谱方法是其中重要的三种方法.谱方法是以整体光滑的正交多项式或函数的组合作为基底
随着国内汽车市场的不断扩大,在国家政府大力倡导下,自主品牌汽车的市场占有率在逐步提高。然而,许多自主品牌整车厂主要采用逆向开发手段,在保证产品品质的同时,缩短上市周
铁作为一类廉价、无毒、储量丰富的催化剂,受到了有机化学家们的广泛关注,并努力将铁催化剂运用到各种有机化学反应中。但是,目前报道的关于铁参与的1,3-偶极环加成和芳基化偶联反应相对较少。因此,本文针对铁辅助的1,3-偶极环加成反应和铁催化的芳基化偶联反应进行了深入研究,并将其应用在3-酰基-1,2,4-噁二唑衍生物、硝基苯衍生物和苯酚衍生物的合成中。本论文主要包括以下三个部分:第一部分:在硝酸铁辅助
为了解决资金问题,2015年2月,交通部发布了《交通基础设施PPP等模式试点方案》,围绕交通基础设施建设的投融资问题做出了全新的尝试和探索,在国内外理论和试点经验的基础上,
随着经济全球化的发展,金融行业的运营安全关乎到全社会的稳定和发展。金融风险可能诱发金融危机,进而引发经济和政治危机。只有金融市场秩序得到维护,金融才能更好地服务国民经济。近年来国家对金融行业的监管力度不断加大,逐步彰显出国家对于金融风险的重视。在现代金融体系中,银行业占据十分重要的地位,所以加强银行业的风险管理已成为现代社会防范金融风险的重点。而其中操作风险现已成为银行面临三大风险中不可忽视的风险
现今电子封装发展趋向于高集成、高功耗、低封装尺寸,需要焊料可焊性、可靠性更高。具有高可焊性、高可靠性的纳米复合焊料研发成为近年来电子封装锡焊料研发热门之一。由于纳米复合焊料应用尚处于起步阶段,对于复合焊料的制备、储藏、焊接、服役、回收等问题研究较少。本文从复合焊膏的制备入手,主要研究纳米相逸出、气泡形成及长大、焊点凝固形核、焊料热学性能以及润湿性能,从而研究复合焊料的可焊性、可靠性。本文通过混合搅
烟叶等级质量关乎着卷烟的香气质,针对目前烟叶收购站均在单一白色光源和光照强度的环境下对烟叶进行分级,本文对不同波段光源不同光照强度下采集的烟叶展开分级研究,以期选择出最适合烟叶分级的波段光源和光照强度。主要工作如下:(1)研究了烟叶图像采集设备。该设备可以采集白色、红色、蓝色和绿色4种波段光源下的烟叶,通过调节光强控制器控制每个光源的光照强度强弱,整个采集过程是在密闭不透光的环境下进行的,尽可能保