基于结构光视觉的物体三维重构及姿态估计研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:Sherryduandian
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
近年来,随着计算机视觉领域相关技术正如火如荼的发展着,三维重建越来越受到相关专家学者的重视。而随着三维重建场景的复杂度越来越高,以及重建精度的要求越来越高,重建的难度也随之增加。其中,主要体现在几个方面,例如静态场景下动态物体的干扰,背景以及其他非重建目标的干扰,环境噪声影响采集三维点云的精度、点云之间的相互遮挡等,这些因素都会影响到重建精度和准确性。近年来提出的相关方法多分为两类,一类是针对固定静态场景的三维建模,另一类针对动态物体将其置于旋转平台上,利用静态相机捕捉图像,进而获得不同角度下的物体点云数据。本论文将综合这两方面的实验场景,探讨动态相机拍摄动态旋转物体的姿态位置,实现复杂场景下的目标物体重构,并进一步估计出目标物体的运动信息。本课题采用基于Real Sense的结构光相机来获得目标的RGB-D图像数据。本文首先介绍了针孔成像模型并建立了结构光的视觉成像模型,推导了根据RGB-D图像数据还原三维空间点坐标的方法。然后针对物体重建这一课题,本文引入图像预处理模块。这里主要分为物体跟踪和物体分割两大模块,借助物体跟踪缩小目标感兴趣区域以提高物体分割的准确度。物体跟踪模块采用的是核相关的KCF跟踪算法,物体分割则是采用了Grab Cut算法,KCF跟踪得到的ROI矩阵可以直接导入Grab Cut算法,进而整合整个预处理模块。图像预处理完成后,对于分割得到的RGB-D图像数据可以合成为三维点云数据。针对不同物体的纹理特征和几何特征疏密程度不同,本文采用加权结合SIFT特征点和FPFH结构特征,对相邻帧点云进行初始粗配准,并进一步采用迭代最近点算法(ICP)实现相邻视角下的精确配准,最后使用闭环检测优化模块消除累积误差,得到目标物体的完整点云模型。在得到优化后的全局位姿后,为了进一步提升模型精度和重建质量,本文基于TSDF模型实现三维稠密模型的构建以及更新。并利用掩膜信息实现剔除动态物体的相机位姿解算,进而解算出物体的运动信息。最终完成基于动态物体场景下的三维重构和姿态估计。最后,为了验证重建系统的可靠性,将本文使用的算法与其他三维重建与位姿估计算法进行比较,同时利用旋转平台和结构光相机对本文提出的算法进行验证,给出的实验结果也验证了本文提出的算法的有效性和可行性。
其他文献
金属有机框架材料是由有机配体和金属离子或簇构成的,因其结构可调和超高的孔隙率得到广泛关注,在分子分离、气体存储、药物输送和生物传感等领域均有应用。本文利用金属有机
水环境生态问题日益严重,全球面临水资源短缺,水环境被污染等问题,寻找一种可以高效去除水体中有机污染物的材料对生态和环境均具有重要意义。除了传统的吸附剂和光催化材料,
无线传感器网络(WSNs)由各种异构的传感器节点组成,因其具有易大规模部署、自组网等优点被广泛应用于生活、工业、军事等方面。由于资源有限且能力不同,传感器节点可以执行不
近些年来,VR(虚拟现实)设备越来越受到人们的喜爱,全球前列技术公司也纷纷布局VR市场。其中数据手套就是当前国内外研究热点。但当前的数据手套手部姿态采集大多使用惯性传感
作为一种新型的人机交互方法,脑机接口技术(Brain-Computer Interface,BCI)因其可以直接读取人类思维而被视为改变人类未来世界的颠覆性技术之一。经过多年的发展,脑机接口技
在光纤光栅发展的几十年内,因为其具有体积小,重量轻,抗电磁干扰等优点,被国内外许多学者关注。近年来,光纤光栅在传感领域发展颇为迅速,涉及的传感领域包括物理,生物,化学等
低频微弱信号检测是高灵敏度传感器的关键技术。传感器前置放大电路是传感器信号处理系统的重要组成模块,前置放大电路的噪声、增益、失调电压等参数决定了传感器的整体性能
宫颈癌威胁着全球女性的健康。在高收入水平国家,筛查技术的普及大大降低了宫颈癌的发病率与死亡率。但是,现有宫颈癌筛查技术都存在各自的不足,迫切需要一种新的基于高分辨
工业现场的许多控制过程中存在着时变大时滞现象,针对这类对象的控制通常需要进行在线辨识,但要求控制器具有较高的实时数据处理能力。此外,在实验室环境下设计时变时滞实验
近年来,中国自然灾害频发,严重的影响了中国的经济的发展,对人民的生活造成了巨大的损失.为了减少巨灾造成的损失,巨灾风险管理的能力正在加强,人们运用数学,金融等方面的知