基于面部关键特征融合的疲劳状态检测方法研究

来源 :贵州大学 | 被引量 : 0次 | 上传用户:minhu315
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
由于驾驶员疲劳驾驶所引发的道路交通事故问题日益增加,因此研发出一套准确性高和推广性强的疲劳检测系统对于降低交通事故发生率就显得尤为重要。针对目前疲劳检测方法普遍存在准确性不强、鲁棒性差和佩戴专用采集信号设备具有侵入性对驾驶员正常行车造成较大干扰等诸多问题,本文提出一种基于关键特征融合的非接触式疲劳检测方法。具体工作如下:首先,增加光照补偿模块。针对传统疲劳检测方法未考虑实际行车过程中光线变化对后续检测造成的不良影响的问题。选取直方图均衡化作为本文光照补偿算法,对比发现经过光照补偿后图像质量较之前有大幅提升。其次,提出改进的MTCNN(multi-task convolutional neural network)面部检测网络。由于传统人脸检测算法存在模型空间大、计算复杂和检测精度不高等问题,本文通过改进原网络结构,减少模型复杂度。针对原网络存在生成的图像金字塔层数过多造成检测时间过长的问题,提出优化最小脸尺寸和压缩图像金字塔层数两种改进措施。结果显示改进后的网络不仅有效减少模型输入数据可大幅降低计算复杂度,而且在保证检测精度的前提下检测效率大幅提升。然后,多特征提取。针对单一疲劳特征易受驾驶员佩戴眼镜、墨镜造成算法精度过低或失效的情况,本文提出眼部、嘴部和头部多疲劳特征融合算法。通过两种算法实现嘴部与眼部特征提取,第一种利用自建数据集训练自建网络EMSD-NET(eyes and mouth state detection net)实现嘴部与眼部张闭状态识别,经测试集验证可分别达到99%与98%的准确度;第二种基于迁移学习策略利用Res Net-18作为主干网络在YTF数据集重训练实现68个面部关键点检测,通过计算眼部纵横比(eye aspect ratio,EAR)与嘴部纵横比(mouth aspect ratio,MAR)间接实现嘴部与眼部状态识别。采用基于N点透视算法来实现头部姿态估计。最后,基于粗糙集理论的多疲劳参数融合。将提取到的关键特征进一步细化为眨眼频率、眼睑闭合度(percentage of eyelid closure,PERCLOS)、闭眼时间、打哈欠次数、点头频率和点头时间六个疲劳参数利用粗糙集理论进行融合,综合判别当前驾驶员疲劳状态。通过实验发现该算法属于无侵入式,不会对驾驶员行车造成干扰且成本较低;检测精度要高于传统检测算法;可有效克服光线、面部遮挡与佩戴眼镜等复杂环境的影响,当某一特征失效后仍可正常工作,同单特征检测算法相比具有较强的鲁棒性。
其他文献
碳化硅(SiC)纳米线因其耐高温高压、高机械强度、抗辐射等优异性能,广泛应用于极端恶劣环境下的电子器件。目前难熔材料熔化的温度高,关于SiC纳米线的熔化机理实验上知之甚少。力学性能是材料使用关键考虑因素之一,然而室温下的脆性和力学性能的分散性限制了SiC纳米线的进一步使用。材料的微观结构决定其宏观性能,本文从缺陷结构的角度出发,通过分子动力学模拟的方法研究了包含空位原子,间隙原子,孪晶界,堆积缺陷
学位
针对小学生语文表达能力较弱的现象,教师要注重授之以渔,引导学生慢慢进步,并以语文园地中的"词句段练习"为例阐述相关对策:首先从多感官体验思考,让学表达更有序;其次从正反面抒发感受,让表达更丰富;第三用修辞精雕细琢,让表达更诗意;最后多元增添巧运用,让表达更独特。
期刊
电容器表面缺陷,对电容器的产品质量与后续生产环节的进行有着极大的影响,为保证电容器的生产质量,对其进行表面缺陷检测极为必要。对于电容表面缺陷的检测,人工检测的方法由于其效率低,消耗大量劳动力成本等缺点,使得许多电容器生产厂家不再采用。基于图像处理的传统视觉检测方法由于其特征提取算法的局限性,导致这种方法的检测效果与实际的检测需求有着一定差距。针对上述两种检测方法的不足,本文基于深度学习对电容表面缺
学位
高铁的发展使得区域间的时间和空间距离被压缩,极大地促进了人员和资源的自由流动,提高了企业全要素生产率,降低了企业间的资源错配,同时还促进了企业管理者之间的面对面交流和企业的创新能力,对企业出口产品的生产产生了一定的影响。因此相对于以往文献中所研究的高铁开通使得企业内部资源发生调整,本论文采用的数据主要包含了2007至2013年间国内高铁、海关、工业企业和城市等,采用双向固定的效应模型,研究分析高铁
学位
由金属谐振元件构成的频率选择表面(Frequency Selective Surface,FSS)通常周期性地排列在二维结构中,由于FSS具有优良的频率选择特性,经常用于雷达天线罩隐身。目前,带通FSS天线罩在实践中得到了广泛的应用,它可以正常传输天线工作频段的电磁波,并将带外电磁波信号从入射波的方向反射回去,以降低单基站雷达散射截面(Radar Cross Section,RCS),从而达到隐身
学位
统编版教材“语文园地”中的“词句段运用”板块鲜明地指向了本单元语用点,精准地给学生提供用以锻炼运用语言文字能力的信息和资源,推动学生语言能力的生长。教师可以通过精准定位目标点、瞄准独特切入点、实践落实运用点来高效地使用好“词句段运用”板块提供的信息和资源,将“词句段运用”教学真正落到实处。
期刊
改革开放以来,中国凭借低廉的劳动成本快速融入全球价值链并成为“世界工厂”,但这种低附加值的生产模式无法打破被“低端锁定”的局面。与此同时,欧美等发达国家实施“再工业化”战略,印度等发展中国家的低成本优势开始显现,叠加国内生产成本的不断上升,中国制造业处于“新比较优势尚未确立、原有比较优势面临挑战”的中间阶段。由此可见,我国要提高制造业出口技术复杂度,提升制造业竞争力,打破发展僵局。在我国大力发展交
学位
随着世界生态环境污染和化石能源逐渐枯竭,我国提出“碳中和”和“碳达峰”的目标,推进我国能源供给侧的改革,高渗透率的可再生能源发电比例不断升高,传统的火力发电机组装机比例逐步下降。配电网的结构也发生变化以适应可再生能源的并网。其中微电网是整合分布式电源的常见形式,微电网群是缓解可再生能源的间歇性、波动性和随机性以及促进未来能源互联网发展的趋势之一,但是微电网群组成单元和结构复杂,微电网与微电网、微电
学位
近年来,随着计算机软硬件技术的发展,视频数据在互联网上呈指数式增长,基于视频的人体行为识别是对视频数据进行有效管理和分析的主要组成部分。本文利用深度学习相关理论,围绕准确识别视频中的人体行为的问题,从时间序列和空间特征两个维度展开研究。主要研究内容如下:(1)针对直接对全连接层输出的一维向量特征做时间序列建模而带来的识别效果不佳的问题,本文利用卷积长短期记忆神经网络(ConvLSTM)对卷积层输出
学位
让计算机能够感知和理解人类世界,并能用自然语言与之交流是人工智能领域的一个长期目标。深度学习的发展让这一目标成为可能,图像描述任务作为自然语言处理和计算机视觉领域的交叉课题,近年来引起了国内外学者的广泛关注。目前公共环境的各类视频监控系统主要采用目标检测与识别技术,存在数据量大、响应时间长且传输困难等问题,相较于图像,文本概括性强,能够以简练的形式传递信息,因此,研究面向公共环境的图像描述具有十分
学位