基于深度学习的高分辨率航拍影像语义稠密重建研究

来源 :长安大学 | 被引量 : 0次 | 上传用户:youwdw
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
利用高分辨率航拍影像实现三维重建与语义分割,推动了城市三维建模和城市规划等智慧城市建设领域的发展。为了充分利用高分辨率航拍影像,本文提出一种基于深度学习的高分辨率航拍影像语义稠密重建方法。该方法以高分辨率航拍影像为输入,经历语义分割、相机姿态估计、稠密重建、语义融合4个阶段。在语义分割阶段,通过语义分割网络得到二维图像的语义概率分布。在相机姿态估计阶段,利用运动恢复结构算法计算相机参数和姿态。在稠密重建阶段,利用深度估计网络估计深度图,并将其融合生成稠密点云。在语义融合阶段,利用相机参数,采用基于概率的语义融合方法,将点云分为5类,生成带有语义标签的稠密点云。本文主要研究内容和创新点如下:1.由于目前大多数深度学习方法都无法获得具有丰富细节的高分辨率航拍影像语义分割图,因此本文提出一种基于生成对抗网络(Generative Adversarial Network,GAN)的语义分割模型,用于实现高分辨率航拍影像语义分割。其中GAN模型的生成器,使用改进的ENet网络(M-ENet)获得航拍影像语义分割图。本文方法在UAVid数据集上达到了88.58%的总体精度和72.37%的m Io U。结果表明,与其他基于CNN的语义分割方法相比,本文方法在精度方面有了显著提高,且有效地保留了边缘信息。2.针对高分辨率图像深度图估计过程中产生的严重的显存限制和耗时问题,本文提出一种基于深度学习的深度估计网络Hi Res-MVSNet,用于对高分辨率图像进行深度图估计。网络的第一阶段将图像特征编码到更小的分辨率,以显著减小显存需求。此外,通过将每层的深度搜索范围限制在先前预测的附近,以提高深度图精度。本文方法在DTU和Blended MVS数据集上取得了比较先进的效果,同时显著降低了GPU显存需求和运行时间。与其他使用相同分辨率的MVS方法相比,本文方法运算速度至少快6倍,且显存需求也减小了3倍左右。3.为了克服由于遮挡、环境复杂性和传感器噪声等因素造成的二维分割和深度估计的误差,本文提出一种基于概率的语义融合方法,将二维图像语义概率分布投影到稠密点云上。此外,为了避免意外的语义错误,采用了局部优化和全局优化相结合的策略对粗语义点云进行优化。该方法充分利用多视图的一致性,可高效地生成精细的语义稠密点云。在UDD数据集上评估的实验结果达到88.29%的像素精度。此外,该方法在自采集航拍影像上也有极具竞争力的表现。总之,本文方法可有效抑制和减小重投影误差。
其他文献
我国是个多山国家,地质灾害频繁发生,滑坡是地质灾害中最常见的类型,滑坡的发生易造成交通中断、房屋损毁、堰塞湖等现象,对人民生命财产安全造成巨大的威胁。因此,开展滑坡的稳定性和方案设计研究,对改善地质环境和工程建设具有指导借鉴意义。本文以陕西省安康市镇坪县竹节溪滑坡为研究对象,对滑坡区域地质环境详细调查,分析了滑坡的影响因素和形成机制。采用理论计算、数值模拟分析(MIDAS/GTS)及AHP多层次分
学位
20世纪中后期以来,受全球化、老龄化、城镇化等众多复杂因素的影响,世界上越来越多的地区先后出现了城市收缩现象,城市的扩张和蓬勃发展已经不再是唯一的发展趋势。河南省作为我国的人口经济大省,近年来区域内经济发展不平衡,又处于产业结构的转型升级期,城市发展活力不足,局部收缩现象比较明显,使城市发展面临诸多困境。对于河南省收缩城市的研究,不仅有利于客观深入地了解河南省的实际收缩现状,例如收缩城市的空间分布
学位
村落空间肌理是乡村区别于城市本质特征的空间表达,村落的空间形态昭显着村落一定历史时期的经济社会发展脉络,然而在城镇化快速发展时期,以城市价值导向主导的规划建设模式进入乡村,诸多村落传统演变过程被中断,村落空间形态传统特征未能有效延续,诱发村落整体空间形态延续性衰退、村落局部空间形态特色缺失、次序混乱等空间性问题。新时代背景下,村落传统文化价值的回归使得村落传统空间形态传承和肌理保护愈受重视,本论文
学位
固体氧化物燃料电池(SOFC)因具有能效高、绿色环保、燃料来源广等优点成为新一代发电装置的研究热点。其中连接体作为SOFC关键部件之一,起到连接阴、阳极,隔绝气氛及支撑部件等重要作用。铁素体不锈钢因可加工性强,抗氧化性能高和加工成本低等优点被广泛用于连接体,但其在长期服役过程中,会发生连接体表面含Cr层不断增厚引发的抗氧化性能下降和Cr向外挥发沉积导致的阴极“Cr中毒”问题。因此,为了改善连接体服
学位
黄土的水气渗透特性与微观孔隙特征密切相关,水气在孔隙中的贮存和运移会使黄土中发生可溶盐溶滤、颗粒重新排列等等一系列的作用与过程,其结果往往导致孔隙空间结构发生变形从而引发各类黄土地质灾害,因此黄土渗透特性一直以来也是黄土工程地质灾害研究的焦点。本文选取更易测试且不受黄土水敏性影响的渗气系数作为切入点,通过改进的ZC-2015渗气仪连接不同测试探头,对原状马兰黄土和不同工况下的重塑马兰黄土进行渗气测
学位
基于对人工智能介入艺术之后的观察、实践与思考,本文给出人工智能艺术的基本定义,讨论人工智能艺术目前所主要依托的图像风格迁移模型、图文预训练模型和扩散模型等,并对人工智能与音乐、舞蹈、戏剧、广播影视、戏曲曲艺、美术书法及设计七个领域的主要应用进行了探讨。人工智能艺术创作的鲜明特点是“人机协作”,各负其责、相辅相成,但其创作是“双主体”的方式。人工智能美学已进入讨论范围,并将与新出现的“元宇宙美学”发
期刊
<正>近年来,昆山市根据“优质、高效、外向、生态、安全”的现代都市渔业发展定位,积极探索现代渔业产业的发展方向和途径,不断创新现代渔业的发展理念和思路,现代渔业建设取得了显著成效,池塘效益稳中有增,湖泊净水渔业得到有效落实,为全市的产业发展做出了积极贡献。作为城市发展相对迅速的地区,传统渔业如何适应城市化进程,实现绿色发展,需要进一步开发渔业功能,昆山的现代都市渔业建设有一定的参考价值。
期刊
随着智能设备和全球定位技术在交通领域的广泛应用,大规模的轨迹序列数据被采集、传输和存储。在快速发展的云计算和大数据分析技术的推动下,对大规模交通轨迹数据进行高效的分析和研究,进而为交通参与者提供实时有效的个性化出行服务已经成为智能交通领域的迫切需求之一。时空轨迹数据是指在一定的时空范围内对移动对象连续移动位置进行周期性采样而得到的时空序列数据。时空轨迹数据在智能交通领域的很多重要问题中有着重要的研
学位
报纸
近年来,二维材料因其优异的特性和广泛的应用成为材料界的研究热点。随着科技的发展,人们对器件的性能要求越来越高,利用二维半导体材料垂直堆叠来设计范德华异质结的方式越来越受到光电子器件的欢迎。另外,为了应对能源危机和确保可持续发展,大力开发环境友好且可再生的氢气成为了一大研究课题。其中,半导体光催化技术拥有巨大潜力,仅在太阳能的作用下就能够从水中获得氢气。而设计异质结被认为是一种得到优秀光催化剂的好方
学位