基于增量式运动恢复结构的弱纹理目标三维重建

来源 :武汉大学 | 被引量 : 5次 | 上传用户:cododo2009
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
利用图像序列进行三维重建是计算机视觉领域的一个重要研究方向,在三维扫描、物体检测与识别、增强现实等领域有着广泛的应用。运动恢复结构能够从包含运动信息的图像中恢复出相机的空间位置以及图像特征点云,实现场景的三维重建。基于该输出,使用多视图立体匹配算法能够估计图像深度,得到目标的稠密点云。由于该方法对弱纹理目标重建时存在误差较大的问题,本文对重建系统中的特征匹配部分和图像深度估计部分进行了研究,针对弱纹理目标的特性提出了相应的改进算法,提升其三维重建质量。本文的主要工作如下:1.提出了一种基于ORB的多尺度二值特征描述子。首先利用FAST角点检测算法进行特征点检测,建立图像高斯金字塔使特征具备尺度不变性的同时,便于后续多尺度特征的计算。在描述子构建阶段,首先通过计算特征采样区域的灰度、梯度比较信息得到二进制向量,分别计算多个尺度的采样区域对应的描述子,将其结果融合得到最终的二值描述子。在Oxford数据集上的实验表明,本文的改进描述子对于视角变化、光照变化、图像旋转缩放、图像模糊等图像变化时有更好的匹配效果和鲁棒性,有助于提升重建质量。2.利用全卷积网络进行图像深度预测,帮助提升物体的稠密点云质量。由于多视角立体匹配算法在针对弱纹理目标时,估计所得的图像深度图误差较大,导致物体的重建点云存在部分缺失。本文通过学习算法对深度进行预测,利用基于ResNet-50的全卷积神经网络模型对图像深度进行端到端的训练,得到与输入图像大小相同的深度图,通过实验证明了该方法能够减少图像深度误差。3.针对包含弱纹理目标的图像序列,实现了物体的三维重建。首先使用增量式运动恢复结构系统对物体进行稀疏重建,将提出的改进特征描述子用于特征检测与匹配,通过图像配准与三角化得到了相机的空间位置以及图像场景的稀疏点云。之后利用全卷积网络对所有图像进行深度预测,将预测值与多视角立体匹配方法的输出融合,最终提升了预测精度,填补了目标表面的部分点云缺失,得到了目标的稠密点云。
其他文献
国内外关于动量效应研究的文献已经汗牛充栋,然而,到目前为止,学者们对中国A股市场动量效应的显著性仍有争议,对A股动量效应的解释也众说纷纭。相对于国外市场,国内A股市场具
本文论述了加强我国辐射防护基础构的必要性。提出应:尽快制定有关辐射防护和电离辐射源安全的法律,明确界定审管部门的职责,改变多头重复审查的状况,建立统一的与密切相关学科结
当代大学生所处的时代发生了翻天覆地的变化,如果高校心理教师依然沿用传统的引导方法和教育模式,不仅无法对学生的心理健康予以正确引导,还会起到适得其反的作用。因此,在信
本文以2010-2013年我国国有和民营排名前100的上市公司为样本,以中国社科院企业社会责任研究中心发布的企业社会责任发展指数(CSR指数)为依据,采用平衡面板数据,分析公司环境绩效
本文对我国《劳动能力鉴定职工工伤与职业病致残等级》(GB/T16180-2014)与美国医学会制定的《永久性残损评定指南》(第6版)在手功能评定方面的规定进行比较研究。从解剖结构
在评估界,关于不同评估方法评估的结果是否具有可比性,大致有两种观点:一是“趋同论”,一是“不同论”。“趋同论”认为,在某些条件满足的情况下,不同评估方法评估的结果具有可比性
本文介绍了中华人民共和国的防汛总则、防汛组织、防汛准备,然后论述了防汛与抢险基本条例,最后文章阐述了其善后的工作条例。
本文主要针对精细化理念引领下的工程施工管理要点展开深入研究,希望为相关行业人士提供些许帮助。
为研究视觉SLAM(Simutaneous Localization and Mapping)以及视觉SFM(Structure From Motion)领域中机器人能低成本重建出可进行语义识别三维场景的问题,借鉴Colmap算法,对重建过