基于深度学习的尺度自适应多视三维重建方法研究

来源 :武汉大学 | 被引量 : 0次 | 上传用户:kelly1105
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
本文提出了一种基于深度学习的尺度自适应多视三维重建方法,能够处理具有不同尺度不同分辨率的图像数据集。尺度问题伴随着整个多视重建流程,从不同距离拍摄相同目标的不同影像,对于重建都有不同意义,过去的多视三维重建方法,大多使用来自同一尺度的影像数据,限制了数据源。为了克服基于多尺度影像进行重建的困难,本文提出的算法具有以下创新:1.在多视三维重建的不同阶段,引入了不同的尺度表示方法,并对原始算法进行了尺度适应性改进;2.在多视深度估计网络中,提出了多尺度循环神经网络、半全局正则化、具有几何感知能力的3D CNN等方法,来改进现有网络的多尺度适应能力。本文的多视三维重建分为影像筛选、深度图重建、点云重建和网格重建和纹理重建四个流程。首先,给出局部体素尺度的定义,使用考虑尺度信息的影像筛选规则选择用于创建深度图的影像集合。接下来,结合深度学习理论重点改进深度图重建算法,使其具备多尺度匹配和正则化能力:改进的特征提取模块Mini-UNet较常用的Uni Net更为精简且能保持精度;提出了多尺度循环神经网络和半全局代价正则化,从而将循环神经网络的感受野扩充至全局;采用了DGCNN进行级联变分深度优化,迭代地更新深度值,从而扩充解空间。然后,在点云重建和网格重建阶段,本文的方法仔细考虑了局部体素尺度与传统多视三维重建的结合方式,因此生成的模型具有最佳的可用分辨率;网格用考虑局部尺度的三维狄洛尼图割生成,生成后进行去噪。最后,纹理重建通过马尔科夫随机场创建合理的纹理,该阶段使用纹理块的梯度强度积分来刻画尺度。本文在顾及尺度适应性的基础上,还尽可能地提升算法并行性同时控制算法的空间复杂度,在DTU数据集上进行训练并与流行算法进行对比,深度图重建较COLMAP至少提速20倍,与P-MVSNet速度相当。为了验证算法的泛化能力,本文在DTU上进行训练,在ETH3D和Tanks and Temples上进行测试,精度较P-MVSNet提升7%~11%;另外,本文还在Blended MVS上进行训练,在私有数据集下进行测试,取得了较好的视觉效果。
其他文献
红松(Pinus koraiensis Sieb.et Zucc.)是我国及东亚地区极其重要的珍贵果材兼用树种。为探讨裸层积方式打破红松种子休眠的可行性及其优化处理条件,确定红松种子的休眠类型
本文采用磁控共溅射方法在玻璃基片上制备了纯ZnO薄膜、Cu掺杂ZnO薄膜以及铜、氮共掺杂ZnO薄膜,并通过X射线衍射仪(XRD)、扫描电子显微镜(SEM)、原子力显微镜(AFM)、紫外-可
建筑行业在国民经济中扮演着越来越重要的作用,在很大程度上推动了我国的经济发展。当前,建筑市场的管理体系并不完善,因此建立一个更加规范、完善的建筑市场管理制度,提高市
近年来,ICO融资模式在世界范围内掀起狂热的浪潮。此种融资模式一方面因为其独特的融资优势为难以获得传统融资的初创企业带来了发展所需资金,另一方面又基于其技术与产品的
随着电力体制改革的逐步推进和需求侧市场开放,以及新能源发电、柔性智能负荷接入配电网需求侧,用户负荷端的主动性增强,通过需求响应参与电网调度。该过程存在多方利益主体,
话语标记语自上世纪八十年代以来已成为语用学研究的一个重要的领域,而研究话语标记语的翻译则可以从语言对比的角度揭示话语标记语功能和意义。但是,英语话语标记语的中文翻译研究数量较少,具体到字幕翻译更是严重不足。本研究旨在探讨两个话语标记语well和you know在字幕中的翻译。通过这一研究,希望能探索英语话语标记语在字幕翻译这一颇受限制的形式中多大程度上能够翻译成中文。本研究旨在回答以下问题:(1)
近年来我国软件与信息技术服务业发展迅猛,信息技术除了在通信、新闻及计算机等领域的应用外,也在不断的与其它产业融合,中华人民共和国工业和信息化部的数据显示,2019年上半
近年来,我国年疏浚量已逾10亿m3,疏浚土数量庞大、组成复杂,难以直接处理利用,且易造成二次环境污染;同时,我国建材行业对砂、石的需求量与日俱增,每年可达100多亿吨,大量不可再生的矿产资源被过度开采,严重破坏了生态环境;此外,随着城市化建设步伐的加快,各类混凝土建材充斥在城市路面,不渗水硬化路面的增加引发了城市“热岛”效应、地表径流、内涝现象等一系列城市问题,严重阻碍了自然生态系统中水资源的自循
在我国实施的“中国制造2025”战略规划和工业互联网建设的迫切需求下,数字化、信息化、智能化的工厂建设已然成为各行业的发展潮流和必然趋势。本文结合国内资源再生领域内废旧家电拆解处理行业H公司的生产现状以及我国战略规划下的企业改善和升级需求,进行了基于机器视觉技术的数据自动采集系统的设计,并结合MES系统相关理论和技术要求,完成了针对H公司的较为简洁的MES系统设计与应用研究。本文以实现生产过程数据
中国特色社会主义进入新时代,网络意识形态领域出现大量新情况、新问题,对加强中国网络意识形态安全提出了新要求。随着网络迅速发展以及网民规模持续增加,西方一些国家开始