人眼检测与跟踪的方法及应用研究

被引量 : 40次 | 上传用户:liongliong450
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
眼睛是人类最主要的感觉器官,也是人脸最显著的特征。对眼睛及其运动的研究是了解人类视觉机制、理解人的情感和行为以及基于眼动的人机交互等问题的关键。基于计算机视觉的人眼检测与跟踪技术具有低侵入性、高精度等优势,现已成为眼动研究的主流方法。人眼检测与跟踪是人脸识别、表情识别、眼动分析、虹膜识别等技术的必要步骤,涉及图像处理、计算机视觉、模式识别以及认知心理学等多个学科,并在工业检测、智能机器人、人机交互、公共安全、智能交通、心理学、医学诊断以及军事侦察等领域均有广泛的应用。现有的人眼检测与跟踪算法存在的客观问题是:精确定位并跟踪人眼的算法都建立在高质量的成像设备与复杂的光学系统之上,缺乏低质量人脸图像中精确获取人眼位置的有效算法,导致精确记录眼动信息的系统价格昂贵且对用户束缚较多,应用范围受到很大的限制。针对这个问题,本文在现有成果的基础上,通过深入研究低质量图像中的眼睛特点,提出了一系列基于低质量图像的人眼检测与跟踪算法,通过设计和搭建低成本的图像采集系统,对本文提出的基于眼动分析的行为识别及注视估计算法的性能进行了系统分析。本文的主要创新点包括:1.为解决现有人眼区域分割方法难以剔除眉毛区域的问题,提出一种基于尺度不变梯度积分投影函数的人眼分割方法。该方法充分考虑到人眼区域图像局部灰度变化丰富的特点,并继承了投影方法计算量小的优点。对不同分辨率、不同光照条件及不同姿态的人脸图像的眼部分割结果表明,该算法能够在保证检测正确率和速度的同时,有效地去除眉毛的干扰。2.为提高低质量人脸图像中人眼检测的精度,提出了一种梯度积分投影结合最大期望算法的人眼检测算法。该方法通过引入最大期望算法进一步缩小了人眼窗口的范围,然后在精确的人眼窗口的基础上采用一种加权质心法获取人眼位置。对YaleB及自采数据库中图像的测试结果表明,该算法对光照、姿态、眼镜及不同的眼睛状态都有很好的鲁棒性,对比实验结果显示该方法的检测精度优于现有的四种投影方法。3.针对现有的虹膜精确定位算法难以用于低质量人脸图像的问题,提出了一种基于矩形积分方差算子的虹膜定位算法,该算法可以在低质量人脸图像中实现快速精确的虹膜定位。在YaleB及FERET人脸库上的实验结果证明该算法对眼睑遮挡、尺度变化、轻微头部转动及光照变化有较好的鲁棒性,在严格的评价标准下正确率达到了百分之九十以上,远高于经典虹膜定位算法的结果。4.为了对低质量视频图像中的眼睛运动进行跟踪,提出了一种基于差分指导的重要性采样虹膜跟踪算法,并根据梯度投影积分函数设计了一种眨眼检测方法以避免眨眼导致的跟踪漂移。采用本文提出的虹膜跟踪方法获取的眼动信号经小波去噪后用于视觉行为识别,取得了理想的效果。5.首次利用单个普通网络摄像头实现了基于眼动分析的行为识别。采用一个置于计算机监视器附近的网络摄像头采集测试者阅读电子文档、浏览网页、观看视频等行为的视频图像,针对低质量视频图像中不同行为的眼动特点,从眼动信号中提取了十种眼动特征,利用支持向量机实现了对不同注视行为的分类。针对不同的应用背景设计了三组验证实验,实验结果证明了基于普通视频图像的眼动分析在行为识别领域应用的可行性。6.为扩展眼动跟踪技术的应用范围,设计了一种低成本、低侵入性的耳麦式眼动记录系统,该系统主要由两个普通CMOS摄像机构成。针对该系统采集的图像特点,提出了一种分段加权环形Hough变换算法用于提取虹膜轮廓中心。最后设计了一种简便的注视点标记方法,利用支持向量回归机实现了对注视方向的估计,实验结果表明低成本眼动仪可以满足日常交互需求。
其他文献
走通识教育与学术相结合之路的"威斯康星模式",虽然没有像"密苏里模式"在中国的推进过程中所表现出的"人"与"资金"的流动,但是我们依然可以从中国早期新闻教育的发展形态以及
目的探讨心理护理在乳腺癌手术患者护理中的应用。方法选取我院2010年~2015年接收的80例需要行乳腺癌手术的患者,分为对照组与研究组。对照组患者给予常规护理,研究组患者在
根据人民银行2011年9月披露的数据,我国3800多家地方融资平台管理总资产8万亿元,地方政府负债则接近5.2万亿元。地方政府融资平台既是我国经济建设不可或缺的力量,但也因其超
本文以“汉语词语的时空域及喻域研究”为题,从认知语言学的理论和体验哲学的观点出发,以垂直空间词语“上”、水平空间泛向词语“旁”、空间属性词语“大”、空间位移词语“
北朝后期,以六镇鲜卑武装力量为基础建立了两个割据王朝:东魏和西魏,并分别被北齐和北周所取代。由于胡族习俗而产生的史料中所谓“等夷”的社会关系的存在,高氏和宇文氏的霸
文章瀑布沟水电站共装设6台600MW的混流式水轮发电机组,在系统中担负调峰、调频及事故备用功能,枯水期担负峰腰荷,丰水期主要担负基荷和部分腰荷,是四川电力系统中的骨干电站
中国经济高速发展的30多年以来,区域经济格局发生了重大改变,区域经济差异已经成为中国区域经济发展的显著特征和不可回避的问题。在区域经济差异扩大的背景下,区域产业结构
目的:本研究旨在通过对原发性痛经患者体质及中医证型进行流行病学调查,探索二者相关性,为临床运用中医体质理论对原发性痛经进行辨证论治,提供科学客观的依据,以期提高临床疗
开发与利用语文课程资源,有利于构建培养审美能力、富有人文魅力、培养创新思维和探究能力、培养道德素养、课内外两翼齐飞的高中语文课程。
“妖魔化”中国的背后──美国传媒是如何讲政治的李希光一1995年冬天,在结束对《华盛顿邮报》半年的工作访问之前,我根据对这家及其它主要西方媒体的统计分析和访谈,撰写了一篇题为