基于密集卷积神经网络的双目立体匹配计算技术研究

来源 :南昌航空大学 | 被引量 : 0次 | 上传用户:gz20090907
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
双目立体视觉是计算机视觉与图像处理等研究领域的一项重点任务,旨在通过计算左右目视点图像中像素点的视差,进而恢复其场景深度,包含了图像中丰富的几何结构信息。因此,研究双目立体视觉的关键是从立体图像对中提取精准、稠密的视差图,继而为更高级的视觉任务提供可靠的先验信息。21世纪以来,随着计算机硬、软件水平的快速发展,双目立体匹配计算技术已被广泛应用于增强现实、自动驾驶、无人机导航制导与控制、三维重建以及目标识别与跟踪等众多领域。
  近年来,随着深度学习理论与技术的不断发展,基于深度卷积神经网络的立体匹配计算精度与鲁棒性得到显著提升。但是,当双目图像中包含弱纹理结构、剧烈光照变化和遮挡等复杂场景时,现有立体匹配算法的准确性与鲁棒性亟待进一步提高。针对以上问题,本文主要研究基于密集卷积神经网络的双目立体匹配计算方法,旨在解决弱纹理、光照变化以及遮挡等复杂场景下立体匹配计算的匹配歧义性和视差图细节损失问题。本文的主要研究内容如下:
  1.首先介绍了双目图像立体匹配计算技术的研究意义与背景,然后归纳总结了立体匹配计算技术的研究现状以及现存的关键问题,最后阐述了本文的主要贡献和章节安排。
  2.介绍了双目立体匹配计算技术的基本知识。对双目立体视觉原理、双目立体视觉系统、立体匹配中常用的约束条件以及现有的典型立体匹配模型进行了详细论述与分析。
  3.针对弱纹理、光照变化和遮挡等复杂场景下视差计算的准确性与鲁棒性问题,本文提出一种基于密集卷积神经网络的立体匹配方法。首先分析了密集卷积神经网络的优势,然后在初始匹配代价计算阶段,构造特征重用的密集全卷积模块,利用跳连接机制将浅层捕获到的特征图级联到后续层,对深层卷积层中丢失的局部特征信息进行补偿。最后,再结合后处理策略对网络预测的代价函数进一步修正与优化以获得最优视差,能够有效提高复杂场景视差计算的准确性和鲁棒性。
  4.针对初始匹配代价网络模型的训练优化问题,本文提出一种具有一定松弛的混合交叉熵损失策略。将反向传播过程中的网络参数学习分为两个阶段,分别设计具有不同期望值的损失函数对网络参数进行迭代更新,以更好地区分所构造训练集中的匹配与非匹配样本,改善网络模型的表现性能。
  5.分别采用Middlebury和KITTI数据库中所提供的标准测试图像序列对本文方法与现有的代表性的立体匹配方法进行综合实验对比与分析。实验结果表明,相比于其他对比方法,本文方法具有更高的视差估计精度,尤其在复杂场景下表现出更好的视差估计和鲁棒性,并能够有效地恢复视差图细节。
其他文献
针对传统数控伺服技术形成的封闭系统不同设备之间无法实现信息交换、不同的软件之间无法实现信息的传输、不同的数据库之间无法实现数据的共享的情况,本文重点研究了一种基于PC机的开放式直线交流伺服系统的设计,并就其产生背景、特点和优势作了详细的阐述,论证了设计开放式交流伺服系统的必要性和可行性。基于PC机的开放式直线交流伺服系统是一种模块化、可重构、可扩充的软硬件系统,其核心是开放式,即这一系统建立在通用
学位
太赫兹科学技术在现代科技界和产业界占有越来越重要的地位,具有广泛的应用前景。为了推进太赫兹科学技术的进一步发展,急需填平“太赫兹空隙”,而表面等离子体切伦科夫辐射源(Surface Polariton Cherenkov Light Source,SPCLS)正是解决这一问题的有力途径之一,因为这种结合了电子学和光子学原理的新型辐射源,可产生太赫兹甚至更高频率的电磁辐射。  为了推进SPCLS相关
学位
为了解决频谱资源匮乏和频谱利用率低之间矛盾,认知无线电技术给接收机提出了宽带频谱感知、可调的多带接收等要求,从而使ADC面临超高采样速率的巨大压力。宽带压缩感知接收机将超宽带频谱压缩采样,并借助于压缩感知理论重构信号,在缓解ADC采样压力的同时删除采样序列的冗余信息。但是,实际的压缩感知接收机存在感知矩阵偏离计算值、传统压缩感知算法重构率低以及硬件实现成本高等问题。本文以此为契机,提出了基于同步宽
随着太赫兹科学与技术的高速发展,太赫兹无线通信也成为了太赫兹科学研究的重要分支,如何对太赫兹信号进行高速有效的调制也成为了太赫兹无线通信中亟待解决的问题。本文分析调研了国内外太赫兹高速调制器件的最新进展;设计研究了基于Meta超材料的双层透射式太赫兹极化转换器,实现了良好极化转换效果的透射式太赫兹极化转换器;研究基于Meta超材料结构的高Q元面,实现了基于尖端耦合效应的高Q值元面设计;试验加工完成
微结构光纤,由于其结构设计的灵活多变性及传统光纤无法比拟的优异光学特性,极大地突破了传统光纤的局限,为纤维光学带来了一场深刻变革,为光纤技术及其应用领域的发展提供了新的发展途径。近年来,微结构光纤及应用研究成为国内外关注的热点,为光通信、光传感、光器件、量子光学、生物医学等领域的发展瓶颈问题突破提供了新的契机。微结构光纤中存在的空气孔为功能材料的修饰提供了天然的通道,材料修饰的微结构光纤集材料的优
高速移动网络作为“泛在”移动互联网的重要组成部分,受到了广泛的关注。随着网络技术发展,高速移动网络可以融合多个电信运营商提供的网络,为移动用户提供丰富的网络信息服务。然而,传统的高速移动网络因其自身架构的局限性和复杂的无线链路特点,难以灵活地协同异构网络来满足移动信息服务的多维需求,造成服务质量差、用户体验不佳和资源利用率低等弊端。因此,本文在智慧标识网络理论基础下,结合高速移动网络特点与服务多维
光纤光栅是最常见的光学器件之一,基于光纤光栅的光电子器件具有体积小、易集成和易与光纤通信系统相连接等优点,是光网络的重要基础。啁啾相移光纤光栅(PS-CFBG)通过在啁啾光纤光栅(CFBG)上引入相移,使其频谱内打开一个或多个极窄的“窗口”,在多通道窄带滤波方面具有明显优势,能够广泛应用于波分复用、多波长调制以及多参量传感等领域。本论文采用V-I传输矩阵法深入分析了PS-CFBG的频谱特性,并以此
LTE(Long Term Evolution)作为下一代移动通信技术的长期演进,具有传送速率高、时延低、可靠性高、载波带宽可灵活配置等特点。然而高速铁路电磁环境复杂,电气化列车运行时弓网离线放电现象频发,其主要频谱能量范围可达几百MHz,是干扰铁路移动通信系统正常工作的主要骚扰源。此外,根据我国现有的频谱资源分布,需要考虑LTE-R在400MHz范围内的适用性,因此有必要研究分析弓网离线辐射骚扰
学位