基于面部表情识别的课堂学习状态监测研究

来源 :新疆师范大学 | 被引量 : 0次 | 上传用户:zhqs1
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
学生在课堂上的情绪往往是其学习状态最直接的反映,教师可以通过学生的情绪表现及时调整教学方法,提高教学效率。但在课堂中,由于学生人数众多导致教师无法有效的在授课的同时兼顾对学生学习情绪的感知;传统的教学质量评价方法是以听课评课和作业成绩等结果性数据作为指标,缺乏对学生学习状态的关注。因此利用人工智能技术帮助教师实时获取学生情感状态,进而识别学生的学习状态,对于教师的教学活动组织、教学质量评估都有非常重要的作用。面部表情是人类情感最直接的表达,包含丰富的信息,能实时的反映出人的情绪状态,因此利用人工智能技术对学生面部表情进行识别可以实现学生学习状态的实时监测。本文提出一种基于卷积注意力的轻量级表情识别模型实现人脸表情识别,然后从教育心理学的角度提出通过PAD维度情感量表将基本表情转化为PAD值,进而使用PAD值对学生的学习状态进行评价。为了增加学习状态判定标准的多样性,引入了抬头率检测和疲劳状态检测进行辅助。抬头率检测基于人脸识别技术,通过计算系统检测到的人脸数与总人数的比值即可得到抬头率。疲劳状态检测基于人脸关键点检测,通过计算眼睛和嘴巴的纵横比识别眨眼和打哈欠,然后根据眨眼动作和打哈欠动作的频率与持续时间判断当前是否处于疲劳状态。最后将表情识别得到的学习状态、抬头率和疲劳状态这三者加权相加,综合评价学生的学习状态。本文以学习状态综合评价方法为基础,设计开发了可以运行于树莓派、PC等小型终端设备的实时学习状态监测系统,可以对本地视频或摄像头视频流进行实时检测。为了验证系统的有效性,将BNU-LSVED 2.0教学质量评价数据集中的序列图片合成视频开展验证实验,实验结果表明,本文所提出的基于面部表情识别的课堂学习状态检测方法能较为准确地识别出学生的学习状态,具备较强的实用性。
其他文献
哈萨克族作为新疆游牧民族之一,拥有着悠久的历史,在漫长的发展过程中,创造出了独具民族风格的建筑——毡房。随着社会的不断发展,这样一种独特的地域性文化建筑的重要性便凸显出来。但也正是因为时代的变迁,毡房原有的使用特征及建筑特色逐渐的淡化。如何将其独有的游牧民族文化特征得到保留与传承,并且使之贴合现代化的发展,成为中国游牧文化底蕴的价值承载物,是民宿设计的难题。本文通过对哈萨克族发展历史及传统毡房的研
学位
此论文主要以写意人物画的表现形式对冬捕题材人物画进行创作和研究。通过吸收和借鉴优秀的冬捕题材写意人物画作品,体会其中的用笔用墨和造型特色,运动到自己的创作中,并在日常的创作实践中寻找自己冬捕题材写意人物画的创新之处,形成自己的绘画特点。本文内容共分为四个部分:第一部分为绪论部分,主要讲述冬捕题材写意人物画的选题来源、研究目的及手段、研究重点难度及创新之处。第二部分为冬捕题材写意人物画的分析与借鉴,
学位
本文提出了一种带有滤波功能的宽带磁电偶极子天线。该天线由一对水平贴片和垂直短路贴片组成,由一条Γ型馈线同时对磁偶极子和电偶极子进行激励。通过将馈线短接,有效地提高了阻抗带宽,并且增强了上边带的边缘选择性。另外通过在馈线上加载四分之一波长开路枝节引入了零点,进一步提高了天线的带外抑制水平。通过电磁仿真软件对该天线模型进行仿真,结果显示,在1.35至3.03GHz的工作频段内,天线的阻抗带宽达到76.
会议
为预测河流水质状况及水质的演变趋势,本文提出利用基于时间序列的CEEMDANN-BEATS的水质预测模型。以新疆阿勒泰地区额尔齐斯河水质监测数据为样本进行训练和验证,使用线性插值法补全存在的缺失值来提高水质数据的完整性。通过将溶解氧、氨氮含量、高锰酸钾质数等指标构成的时间序列分解为相应的水质参数分量来预测水质指标。实验结果表明,通过CEEMDAN-N-BEATS水质预测模型进行水质预测所产生的预测
学位
机器阅读理解是自然语言处理领域的热门话题之一,其意义在于使机器理解文本语义并具备推理提炼文本信息并回答相关问题的能力。得益于深度学习技术的不断发展以及大量机器阅读理解数据集的发布,机器阅读理解的研究取得了很大的进展。但是,现有研究中采用的word2vec词嵌入技术存在长距离依赖、一词多义与未考虑中文分词特性等问题。同时,很多研究中使用的模型都是基于经典单一模型修改而来的,单一模型存在泛化能力不足且
学位
随着科学技术的进步,大多数人都拥有智能机器或智能终端。以智能语音助手为例,只有能够对人类的情绪做出快速准确的评估,才能充分理解人类的情绪和意图,并产生更智能的反应。在智慧医疗中,对患者情绪状态的智能识别,有助于舒缓患者情绪,协助医生完善治疗方案。在智能交通中,实时监测驾驶员的情绪状态,如果发现异常情况,如醉酒、疲劳驾驶等,将第一时间发出提醒,有效避免交通事故。在人工智能时代,人机交互越来越普遍,用
学位
互联网和社交媒体的快速发展促使网上新闻文本数据呈爆炸式增长,如何快速高效的获取所需信息已成为亟待解决的问题。自动文本摘要技术能够将冗长文本压缩处理为简洁连贯且不失原意的短文,从而加快人们获取信息的速度。基于Seq2Seq模型的生成式文本摘要模型取得了较好的效果,但这类模型大多采用教师指导的方式进行训练,这会导致曝光偏差问题。为此,文中探究了两种不同的解决方案:(1)借助对比学习技术,通过将目标序列
学位
随着信息技术的发展,软件已被广泛使用,成为日常生活中不可或缺的一部分。随着软件的复杂度和多样性的提高,对软件质量的保障也提出了更高的要求。在软件工程中,软件缺陷预测技术可以识别软件模块中的可疑信息,通过有效分配测试资源,从而提升软件测试效率、保证软件质量。然而在实际应用中,新开发的项目因历史数据不足无法获得较好的性能,于是,跨项目软件缺陷预测技术成为学术界和工业界的研究热点。跨项目软件缺陷预测通过
学位
关键词生成方法可以为一段文字或一个文档生成能代表其主题及主要信息的关键词。目前的关键词生成方法大多是应用循环神经网络结构,这种网络结构依赖于当前和先前时间步长的状态,存在文本长距离依赖限制的问题,且其顺序性也排除了训练样本的并行化。同时存在文本词嵌入表示不够精确、泛化性能差以及训练成本高等问题,限制了文本关键词生成性能的提升。针对这些问题,论文做了以下研究:(1)针对长距离依赖限制、词嵌入表示不够
学位
随着5 G、物联网、大数据、互联网等新兴科技的普及,城市的信息化程度日益提升,智慧城市也随之出现。在智慧城市推进进程中,刑事案件、恐怖袭击、社会动乱等社会安全风险与隐患也日益严峻,加强城市公共安全变得尤为重要。在现实生活中,公共安全事件具有信息不对称性、突发性、随机性,同时安防部门拥有的防护资源是有限的,不能对所有保护目标进行24小时全方位的保护。因此,如何选择最优防御行动策略、信号策略进行有限安
学位