基于深度学习的深度图超分辨率重建研究

来源 :天津大学 | 被引量 : 0次 | 上传用户:m634606037
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着三维立体技术的发展,三维立体技术的应用将会覆盖国家科技发展和我们日常生活的方方面面,具有重要的研究意义。深度信息是三维立体技术应用和发展的基础。因此,高质量的深度信息是三维立体技术能够提供舒适的体验,从而可以得到更加广泛应用和快速发展的重要保障。然而,现有的深度相机由于硬件条件的限制,获取的深度图分辨率较低,在应用时无法很好的与对应的高分辨率彩色图结合,获得高质量的虚拟三维场景。因此,深度图的超分辨率重建研究在三维立体技术的发展中具有重要的意义。本文利用低分辨率深度图和对应的高分辨率彩色图之间的关联信息,基于深度学习的方法,对深度图超分辨率重建进行了研究。1)提出了一种基于边缘增强全引导的深度图超分辨率重建算法。考虑到低分辨率深度图和高分辨率彩色图之间的关联性,设计了一种具有两路分支的卷积神经网络结构。两路分支分别对低分辨率深度图和高分辨率彩色图进行特征提取。在两个分支对应级别的网络层之间,利用从高分辨率彩色图中提取的特征对低分辨率深度图的上采样进行充分的引导。特征在卷积神经网络中融合以后,最终恢复重建出高分辨率深度图。此外,考虑到高分辨率彩色图中包含较多冗余的信息,提出了一种边缘增强方法,加快了网络训练时的收敛速度,提高了深度重建的质量。实验结果表明,所提出的方法能够出色地完成深度图超分辨率任务,获得边缘锐利清晰的重建结果。2)提出了一种基于结构注意力引导卷积神经域的深度图超分辨率重建算法。通过设计两路具有强表达能力的卷积神经网络结构,分别从低分辨率深度图和高分辨率彩色图中提取特征。同时,在提出的卷积神经网络结构中引入了条件随机场,将注意力机制模型集成到条件随机场中,使得模型能够在卷积神经域中关注于深度图的纹理结构。两路分支的特征在卷积神经网络中通过互相的引导并且融合,从而得到最终的重建结果。实验结果表明,该方法能够重建出包含准确纹理细节的高分辨率深度图。
其他文献
自贡大山铺恐龙化石群,以化石埋藏丰富和完整誉名全国。近两年来报刊、杂志均有报导。自贡大山铺恐龙化石,在1972年由地质部第七普查队(现称地矿部第二地质大队)的同 Zigon
本文基于Monod方程,对膨胀颗粒污泥床(EGSB)反应器建立了动力学模型.该模型将厌氧体系中的微生物简化为两大类,即产酸菌和产甲烷菌,并考虑了其生长和衰亡的动力学过程;将厌氧
P2P网络借贷平台由于其自身运营模式的特殊性,聚集了互联网金融和传统金融的多重风险。论文通过分析P2P网贷平台信用风险的生成机理及影响因素,选取信用风险评测指标,以50家
2019年3月—10月,笔者在导师的指导下参加《现代军用直升机》翻译项目实习,对《现代军用直升机》一书进行翻译与审校。根据任务分配,笔者负责本书五小节(共计1,0973字)的翻译
作为交际工具的英语,其交际功能在教学中的重要性已逐渐受到人们的重视。在实际交际中,由于不了解东西方文化的差异,往往会使人们产生许多误解,甚至冲突。因此,英语教学应与文化教
在理解CPI因额外需求变动方面,消费者信心指数(CCI)是一个重要变量。CCI与额外需求价格波动的显著关系主要是通过城镇居民消费联系起来的。从时间序列的角度来看,CCI对额外需求
目的:观察早期康复训练和神经肌肉电刺激对脑卒中偏瘫患者肢体功能恢复及提高日常生活活动(ADL)能力的效果.方法:将2008年1月~2010年12月的 160例急性脑卒中患者随机分为治疗组及
问:未与我国政府达成双边运输免税安排的国家和地区的单位或者个人,向境内单位或者个人提供的国际运输服务,应如何计算代扣代缴增值税?向境外单位提供工业设计服务,营业税改征
实行党务公开是进一步健全民主、加强党内监督的一个新课题,也是油田一线广大党员干部员工关心的热点问题。这就要求我们在党务公开工作中,做到明确党务公开职责、党务公开内