基于眼动视频的注视点轨迹描述方法及应用研究

来源 :安徽大学 | 被引量 : 0次 | 上传用户:panxi1210
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
眼动跟踪技术是一种新型的人机交互(Human-Computer Interaction,HCI)技术,而注视点轨迹描述方法是眼动跟踪技术的关键算法,注视点轨迹描述方法的精度直接影响着眼动跟踪的效果。注视点轨迹描述方法通过对采集的眼动视频进行瞳孔定位和注视点标定,来建立瞳孔中心与注视点的映射关系,从而估算人的注视点,得到注视点轨迹和感兴趣区域。注视点轨迹描述技术在医疗领域、心理认知领域、个性化广告推荐领域、安全领域等方面有着广阔的应用前景。因此,加快注视点轨迹描述技术研究步伐,提高注视点轨迹描述技术的核心竞争力,对于有效改善基于眼动信息的人机交互系统性能具有重要的意义。本文给出了一种基于眼动视频的注视点轨迹描述方法,即通过摄像头采集受试者的眼动视频数据,对视频数据帧进行预处理,再进行眨眼检测滤除眨眼帧,并通过瞳孔定位求出瞳孔中心坐标,结合注视点标定建立瞳孔中心与屏幕注视点的映射关系,根据映射关系实时地反算出看屏幕的注视点。本文的主要研究包括以下内容:(1)本文分析了注视点轨迹描述系统的研究现状,针对现有问题提出了基于眼动视频的注视点轨迹描述算法。该方法首先使用红外摄像头采集视频眼动信号,并对其进行滤波去噪等预处理;紧接着,进行眨眼检测和瞳孔定位;并在此基础上,结合所建立的瞳孔-注视点二阶映射关系,进行注视点轨迹的描述。基于该算法对数据的需求,本文设计了实验范式以及三种类型的实验观测图片,实现对视频眼动数据的采集,并初步建立了一个小型眼动视频的数据库。(2)针对瞳孔定位模块,本文给出了一种瞳孔粗定位与瞳孔精定位相结合的瞳孔定位方法。首先,使用红外摄像头采集视频眼动信号,通过自适应二值化阈值等方法对眼动图像进行预处理,提高视频数据精度。其次,进行眨眼检测来滤除眨眼帧,通过行列定位法对瞳孔进行粗定位,并用椭圆拟合瞳孔,求出一个近似圆形瞳孔区域,然后对该区域采用阈值质心法来确定瞳孔中心的精确位置。实验结果表明,该方法在求瞳孔中心点位置时效果显著,可有效提高瞳孔定位的性能。(3)针对注视点标定模块,本文通过非线性二阶多项式函数来求出人眼的瞳孔中心位置和所观看的屏幕注视点坐标之间存在的映射关系。考虑到标定过程的复杂度和所求解映射关系的准确性,本文采用了九点标定方法进行注视点的标定。实验表明,实验室环境下,八位受试者注视点轨迹描述的平均误差为0.414弧度,相比较传统的注视点轨迹描述方法(0.57弧度),其精度提高了0.156弧度。(4)本文在MATLAB平台上设计了一种基于眼动视频的注视点轨迹描述系统。该系统主要由数据采集模块、瞳孔定位模块、注视点标定模块、结果输出模块四个功能模块构成,人们可以通过简单的图形用户界面对系统进行操控。系统能够有效地支持广告类网页布局的优化,从而帮助商家将消费者感兴趣的产品有针对性地进行推广,具有较高的潜在应用价值。
其他文献
相对于传统电机,开关磁阻电机具有很多优势,然而由于位置传感器的存在,这些优势被极大地削弱。所以,近年来关于无位置传感器开关磁阻电机控制策略,尤其是相电流梯度法的研究
在大型波流耦合试验水池中进行了阶段流作用下深海立管涡激振动抑振敏感性试验研究。试验立管模型长6.2m,长细比310,模型材料采用铜管,立管上部1.2m处于均匀稳定的流场中,下
以甲苯为焦油模型化合物,分别以KCl,K2CO3为前驱体,考察了助剂钾对Ni/Al2O3催化剂催化转化反应性能的影响.实验结果表明:添加助剂钾可以降低镍基催化剂表面酸性,有效改善催化
Platinum-based chemotherapy remains the main treatment of advanced lung cancer. However, platinum resistance has become a major treatment obstacle. Novel therap
背景与目的:监测慢性髓系白血病(chronic myeloid leukemia,CML)的微小残留病(minimal residual disease,MRD)的常用方法有间期荧光原位杂交(interphase fluorescence in situ hybrid
背景与目的:细胞因子诱导的肿瘤杀伤细胞(cytokine—induced killer cells,CIK cells)对肝癌细胞具有较强的抗肿瘤活性,联合CIK细胞疗法是否能够进一步消除介入治疗后的残留癌细胞
我国低阶煤储量丰富,但由于其变质程度低,表面富有大量的含氧官能团,使其疏水性差,常规烃类捕收剂难以吸附到低阶煤表面,浮选经济成本高,通常低阶煤分选工艺中不设浮选作业。
函数列非一致收敛性判别问题是数学分析中最重要的"非概念"之一,也是数学分析学习重难点之一,是后续函数项级数相关解析性质研究的基础.通过逆向思维,对数学分析教材内容进行
本文以人体腰椎损伤后内固定装置稳定性实验为主,配合口腔双端固定桥稳定性分析实验介绍了激光全息-散斑测量技术在生物力学中的运用情况。对标本制备、加载装置、光路系统、
近年来,大型火电机组不断投产。这些火电机组,尤其是超临界、超超临界机组,运行参数高、工艺系统复杂,设备繁多,对自动化控制系统提出更高的要求。充分利用自动化控制系统是