面向有雾场景的多视角立体重建研究

来源 :郑州大学 | 被引量 : 0次 | 上传用户:wang8550cimc
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
多视角立体(Multi-view stereo,MVS)重建是计算机视觉、图像处理等领域中一个基础又重要的研究课题,在增强现实、自动驾驶、城市规划、3D打印以及数字文物等领域发挥着至关重要的作用。当前多视角立体重建方法研究主要面向清晰场景,而面向有雾场景的研究较少。同时,有雾场景下图像间的对应点不匹配和复杂背景噪声通常容易导致多视角立体重建结果退化。本文重点研究了有雾场景下的多视角立体重建算法,主要的研究工作如下:(1)本文研究雾形成的基本原理,创建一个有雾多视角图像数据库,包含合成有雾数据库和真实有雾数据库。其中合成有雾多视角数据库是基于大气光模型算法和端对端的图像转换网络CGANs(conditional generative adversarial networks)算法获得;真实有雾数据库通过在雾天场景中拍摄不同视角下的图像得到。最后将创建的多视角有雾数据库在Visual SFM和Open MVS平台上进行了评估,对比总结有雾场景下立体重建的各种问题,如匹配点数大大减少、重建模型信息丢失严重等等。(2)针对有雾场景下多视角立体重建问题,本文提出一种融合去雾技术和运动恢复结构SFM(structure from motion)反馈的立体重建算法。通过估计有雾场景中的相机位姿得到精细化的深度线索,提出自适应图像填充算法对深度图进行补全和去噪。然后基于优化后的深度图计算对应的传输图,并根据大气光模型求出潜在的清晰图像,使运动恢复结构和去雾技术形成一个反馈,实现立体重建有助于去雾,去雾也有利于立体重建的目的。实验结果表明,提出的融合去雾技术和运动恢复结构反馈的立体重建算法在有雾场景下取得了良好的立体重建效果。(3)本文在所提出的有雾场景多视角立体重建算法基础上,提出有雾场景中适应当前环境的虚拟物体渲染方法。首先利用多视角立体分析在一系列有雾图像中得到深度信息,以估计虚拟物体的位置和尺寸大小。然后根据大气光模型深度线索进行有雾场景的虚拟物体渲染,使虚拟物体在相同的距离范围呈现出一致程度的雾效果。最后特别研究了被遮挡的虚拟物体的深度和其周围物体的深度之间的关系。实验结果实现了将虚拟物体无缝渲染到有雾场景的目的。
其他文献
近年来,高校的图书馆藏规模不断扩大,图书数量骤增,种类繁多,面对数量众多的馆藏图书,学生去借阅比较感兴趣的图书需要耗费大量的时间和精力,如何更有效的借阅书籍成为学生比较关心的问题,因此,图书的个性化推荐应运而生。个性化推荐已经成功的应用到了电子商务、购物消费等领域,通过对大量的用户信息进行处理、分析和发掘得到用户的行为偏好。但传统的推荐方法往往结果不是很令人满意,需要对传统的协同过滤算法进行改进。
近年来,在我国新型城镇化战略规划下,我国城市化进程不断加快,棚户区的存在成为城市化进程中的一大阻碍。为实现我国新型城镇化战略目标以及提升棚户区居民的生活幸福感,棚户
基于口令的认证方法因开销小、使用便捷,故成为目前使用最广泛的身份认证方式。正是因为使用简单,口令也一直存在着严重的安全问题:(1)来自不同语言的口令集具有明显不同的字
遥感图像是国防、航天、城市规划等多个领域所需的一类重要数据.遥感图像处理已受到众多学者的广泛关注.在机器学习算法盛行的潮流下,如何将机器学习与遥感图像处理相结合,以
域自适应学习是当前机器学习和模式识别领域一个研究热点,随着深度学习研究的不断进步,人工手选特征的时代即将结束。深度学习可以以最佳的方式自动从原始数据中提取到具有代
当前我国经济正在从高速增长阶段转化为高质量发展阶段,区域之间、城乡之间发展存在一定的差距,物质文明建设和精神文明建设、经济建设和国防建设之间存在不协调的状况,发展
机器视觉图像中的雨线、雨滴或水滴的存在,将直接影响图像背景的清晰度,对监测系统性能造成很大的影响。如何有效地去除图像中的雨线、雨滴或水滴,提高图像的质量,是需要解决
本文是基于笔者对David Johnston的作品The idea of Canada:Letters to a Nation进行的翻译所撰写的实践报告。翻译原文来源于加拿大总督为自己的国家所写的信件。展现了他一
身份认证是保护计算机系统安全的重要手段,传统身份认证方法的认证因素具有易遗忘、易泄露和易丢失等缺点,而基于鼠标行为的身份认证方法不需要额外设备,方便用于持续身份认
当前,国内外对青年科学家的培养工作极为重视,而青年科学家个体层面的学术绩效评价与预测也成为困扰科学界的一个难题。随着科学计量学的蓬勃发展,文献计量评价指标迅速兴起,同行评议制度受到到挑战,科学家个体层面的绩效评估从单一的同行评议逐渐向采用评价指标进行客观、公正、全面评价的方向发展。文献计量指标发展到现在已趋于成熟,演化为五代指标,为科研评价和绩效评估提供了扎实的理论基础,但其在科研评价中的有效性还