高精度视线跟踪算法研究及其在VR系统中的应用

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:yangdod
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
视线跟踪技术是一项检测人眼视线方向或者注视点的技术。基于三维模型并使用RGBD图像的视线跟踪算法与基于多项式拟合的头戴式视线跟踪算法是主流的两大类视线跟踪算法。本文分别针对这两类主流视线跟踪算法中存在的问题进行了深入的研究。基于三维模型并使用RGBD图像的视线跟踪算法存在如下两个问题:1)三维虹膜平面的中心在摄像机成像平面上的投影与RGB图像中的虹膜中心不重合,导致现有三维虹膜定位算法难以正确定位出三维虹膜平面的位置;2)忽视人眼扭转运动,导致Kappa角矫正与人眼球模型参数计算产生误差。为了解决这两个问题,本文提出了基于虹膜投影匹配函数的视线跟踪算法。该算法主要贡献有以下四点:1)提出虹膜投影匹配函数。该函数通过投影几何的原理,对三维虹膜平面与二维虹膜图像之间的投影关系进行建模,并通过虹膜投影内像素点以及边界像素点的匹配得分,计算出三维虹膜平面与图像上虹膜的匹配程度。2)提出基于虹膜投影匹配函数的三维虹膜平面定位算法。本文通过结合人眼球模型与虹膜投影匹配函数进行三维虹膜平面定位。从而,该算法能利用投影几何原理精确表示虹膜平面投影关系,提高三维虹膜平面定位的精度。3)提出基于多项式拟合的Kappa角校正方法。本文通过建立多项式对人眼扭转运动导致的Kappa角旋转方向变化进行建模。从而,算法能够根据人眼球的旋转方向,计算出视轴绕光轴旋转的度数,降低了扭转运动对视线估计算法的影响。4)设计了基于虹膜投影匹配函数的人眼球模型参数计算方法。该方法的目的是计算贡献2、3中所述算法所需的人眼球模型参数,例如虹膜半径、虹膜旋转半径、人眼球中心以及Kappa角度数等。因为此时,贡献2、3中的算法缺少人眼球模型参数,所以在计算人眼球模型参数时无法使用贡献2、3中的算法来解决虹膜定位以及忽视扭转运动的问题。因此,本文设计了该方法进行人眼球模型参数的计算。该方法通过引入虹膜投影匹配函数,来解决三维虹膜平面定位不准的问题。并通过将光轴绕视轴的旋转角度作为需要求解的变量,来解决扭转运动使人眼球模型参数计算精度下降的问题。实验结果表明,本文提出的基于虹膜投影匹配函数的视线跟踪算法具有较高的精确度(误差为1.07°-2.28°),并且速度达到52.6FPS。而对于基于多项式拟合的头戴式视线跟踪算法,存在用于构成眼动特征向量的眼角、虹膜中心、角膜反射斑提取不准,导致视线跟踪算法精度下降的问题。为解决这个问题,本文提出仅基于瞳孔特征的头戴式视线跟算法,该算法不使用眼动特征向量,而直接将瞳孔中心特征带入多项式映射方程计算得到注视点。并且,为了解决瞳孔中心特征对头部抖动鲁棒性低的问题。本文提出了基于瞳孔朝向的抖动补偿算法,当发生抖动后,能够通过瞳孔朝向计算出发生抖动前后,瞳孔中心坐标的对应关系,并对瞳孔中心特征的偏移量进行补偿,由此提高瞳孔中心特征对抖动的鲁棒性。最后,本文基于提出的仅基于瞳孔特征的头戴式视线跟算法搭建了一个VR视线跟踪系统,用于测试算法性能并使算法得到实际的应用。实验结果表明,本文提出的仅基于瞳孔特征的头戴式视线跟踪算法误差较低,为12.7像素,对抖动鲁棒性好(经矫正后的误差为33.0像素),并且算法运行速度为47.17FPS。
其他文献
职业人群是国家发展和社会进步的有生力量,在工作中最容易被忽略的是,因健康认知不足而存在的健康隐患,这些隐患使得引发慢性病的概率大大增加。怎样有利于职业人群对健康素养知识的主动学习,怎样有利于职业人群对健康素养知识盲区的自检并有针对性的学习,都是目前急需研究的课题。目前健康素养知识学习系统较少,并且存在测题局限在健康素养66条范围、检测结果没有系统分类等问题,已不满足大众需求。针对不足,本论文设计实
肺癌是我国常见的恶性肿瘤,其发病率和死亡率均居恶性肿瘤首位,大部分肺癌患者在确诊时已是晚期,因此错失了最佳手术治疗时机,分子靶向治疗因其毒副作用小、靶点专一、简便易
'三个代表'的归结点是代表最广大人民群众的根本利益.教育工会实践'三个代表'的思路是:应该坚持党的'依靠方针',在党政所急,教工所需,工会所能的交
本文研究了具有小阻尼和弱非线性静力矩的尾翼弹的平面非线性运动。用稳定的极限环解释了某些尾翼弹可以产生自激振动;用不稳定的极限环探讨了某些尾翼弹掉弹的原因。为了减
本文论述了水杨醛与乙二胺、丙二胺、邻苯二胺、对苯二胺合成西佛碱及西佛碱与Co(Ⅱ)、Ni(Ⅱ)、Zn(Ⅱ)合成Salen金属配合物.这些化合物均被1HNMR、IR和元素分析证实.并讨论它
高校扩招之后,必须千方百计采取多种措施来保证教学质量.教育部要求:各级行政部门和高等学校要从本地区、学校的实际情况出发,制订相应的具体措施和办法,把本科教学质量提高
目的:探讨Merkel细胞癌的诊断、治疗及预后。方法:1989 ̄1999年间,共收治3例Merkel细胞癌患者,均接受扩大性切除术及放疗和/或化疗。结果:3例病例均于后5月内复发,中位存活期2年。结论:Meredel细胞癌是一种罕见且进展快
<正>肝脏是人体内最大的解毒器官,也是人体内重要的代谢器官之一,所以维持正常的肝脏功能至关重要,而近年来随着人们生活方式和生活环境的改变,世界范围内慢性肝病的患病率及
会议
多媒体CAI具有强大的优势.高师院校必须要求教师自己动手制作、应用多媒体CAI课件,并解决好几个关键的认识问题.
特朗普访问中国,美台关系也引起更多关注。美台关系一直是台湾岛内的敏感话题,蓝绿阵营对美国的对台态度均十分关注,“独”派政治人物甚至将美国视为“台独”的支持者。因此,