基于嵌入式多级注意力机制的双目立体匹配与表面重建研究

来源 :华南理工大学 | 被引量 : 0次 | 上传用户:wysaccp
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
双目立体视觉作为计算机视觉领域存在时间最久的问题之一,旨在通过二维图像恢复场景中的三维信息,在自动驾驶、测绘制导以及虚拟现实等多项三维视觉应用中发挥重要作用。本课题依托中兴通讯公司委托研究项目—“自动驾驶中视觉定位关键技术及知识产权布局”,主要围绕双目立体视觉中的相机成像模型、标定方法、立体匹配和三维表面重建进行研究,并将立体匹配网络构建与稠密表面重建方案设计作为研究重点。本文提出的方法在立体匹配公开Benchmark测试中实现了SOTA(State-Of-The-Art)性能,并在三维表面重建中生成了高质量目标模型。论文的主要工作与贡献如下:首先,针对目前立体匹配网络采用编码器-解码器结构获取图像上下文信息时损失重要细节特征的问题,本文提出了一个残差空间金字塔池化与通道注意力机制集成模块,在更大的感受野下捕捉分层的多尺度上下文信息,进而获取丰富的局部和全局特征,同时融合通道注意力机制对判别性特征进行选择性增强,消融实验结果验证了所提出模块在提高网络预测性能方面的有效性。其次,为改善目前立体匹配网络中由于全局一致性依赖关系捕获能力受限而导致的匹配模糊问题,本文设计了一种嵌入式多级注意力子网络,并将其整合到立体匹配骨干网络中以提高像素级匹配精度。子网络采用基于学习的多级注意力机制捕捉全局上下文信息,为骨干网络提供三个必要的注意力信息流,分别用于改善像素级一元特征表征,引导代价体积的校准修正,以及进一步细化初始视差图。实验结果表明所提出的多级注意力子网络和立体匹配骨干网络的紧密协同整合可以显著提升视差预估精度,并在实际应用场景的测试中生成高鲁棒性预测结果。最后,针对基于视差图构建的稠密点云集合中偏离正常范围的异常点,本文提出了一种基于统计学与基于半径搜索相结合的异常值筛选移除策略,该策略在处理过程中对远离点云主体的离散点表现出高度敏感性,同时对呈稀疏球体分布的离散点表现出更强的移除能力。本文采用基于poisson方程的隐式曲面重建方案处理经过异常值筛选移除的点云集合以生成目标三维模型,实验结果表明,所提出的点云异常值筛选移除策略可以取得显著的效果增益,使目标模型重建质量得到明显提升。
其他文献
随着我国城市化进程的推进,国有建设用地长期处于供不应求的状态,集体建设用地的作用越发显现。在实际中,由于集体建设用地与国有建设用地在权属性质和区位条件上的差异,使得现存的建设用地定级与估价的方法存在不适用的情况。采取适宜的方法尽快评估集体建设用地基准地价并建立全面完善的集体建设用地市场成为了集体建设用地工作的当务之急。通过查阅国内外土地定级与基准地价评估的研究,发现针对欠发达地区的集体建设用地定级
学位
本试验通过日粮中添加不同水平当归和艾叶,研究对产蛋后期蛋鸡生产性能、蛋品质及脂质代谢的影响。探讨其作用效果,为生产低胆固醇、优质脂肪的鸡蛋提供理论依据。试验选取同批次、产蛋率相近健康的16月龄海兰褐蛋鸡240只,随机分为4个组,一个对照组,三个处理组,每个组设3个重复,每个重复20只。分别饲喂:基础日粮(试验Ⅰ组)、基础日粮+当归与艾叶比例为1∶1的1%中草药添加剂(试验Ⅱ组)、基础日粮+当归与艾
学位
汾河湿地作为山西省湿地系统的重要组成部分,为山西省的经济、社会和生态环境的协调发展提供了重要的物质基础。其中,多样化的微生物群落对维持汾河湿地生态系统的可持续发展具有重要意义。本文以山西省汾河干流湿地土壤为研究对象,探究汾河上、中、下游区域中土壤细菌与古菌的丰度特征、群落分布规律及其与环境因子之间的相关性,以期明确汾河干流湿地土壤微生物群落的演替规律,以及汾河湿地环境因子与微生物间的响应关系,进而
学位
基于光学信息理论分析法,对激光投影显示成像系统中投影光学系统数值孔径尺寸和随机位相片照明光斑大小对散斑衬比度的影响进行了系统分析.分析表明,当投影系统数值孔径较小时,散斑衬比度影响因素主要由投影光学系统自由度数NDOF决定,即此时投影系统数值孔径大小的改变对散斑场衬比度的影响较大;当随机位相片在入射光束光斑直径较小时,散斑衬比度取决于物面光自由度K,此时增大投影系统数值孔径对散斑场衬比度的影响不大
期刊
中药党参为桔梗科多年生草本植物(Codonopsis pilosula(Franeh.)Nannf.),以干燥根入药。潞党参是党参的一个重要品种,主产于山西长治市、晋城市及周边地区。合理施用氮肥是获得潞党参高产量、高品质的前提,为探明潞党参氮素需求规律,明确潞党参种植过程中适宜的氮肥用量,在道地产区山西省陵川县开展田间试验,研究0、60、90、120、180、240 kg/hm~2六个不同施氮水平
学位
报纸
我国饲料原料资源缺乏,饲料利用效率较低,寻找新型饲料处理技术提高饲料利用效率成为研究的热点。本试验选择淀粉酶、脂肪酶、蛋白酶、溶菌酶、葡萄糖氧化酶、非淀粉多糖酶(纤维素酶、果胶酶、木聚糖酶、(?)-葡聚糖酶、(?)-半乳糖苷酶)10种酶制剂组成复合酶制剂配方,设置温度梯度40℃、50℃和60℃对饲料进行液态酶解,检测酶解饲料对饲料品质的影响。利用酶解饲料饲喂杜长大生长猪,检测酶解饲料对生长猪生长性
学位
传粉蜂与开花植物是相互影响互相作用的关系,传粉蜂采集不仅依赖视觉还依赖嗅觉,因此,花朵挥发物在传粉蜂与植物互作过程中起到关键作用。蜜蜂和熊蜂是农业生产中主要使用的传粉蜂,许多作物的坐果和产量均依赖蜜蜂和熊蜂授粉。草莓作为我国主要经济作物,通常使用蜜蜂和熊蜂为其授粉。本研究利用固相微萃取和GC-MS测定草莓花朵的挥发物,利用触角电位技术筛选出意蜂(Apis mellifera ligustica)和
学位
近年来,虚拟现实技术的快速发展对人机交互技术提出了新的要求。传统机械式的人机交互方式已经不能满足虚拟世界场景中高自由度的交互需求。基于肢体动作、面部表情、自然语言等高级人机交互方式成为了新一轮的研究热点。其中,三维手势估计作为手势人机交互中的重要一环,能够帮助计算机准确捕捉人手与物体、环境及设备在三维空间中的位置关系,对计算机理解场景并作出反馈具有重要意义。深度学习技术在计算机视觉领域的突破性进展
学位
本研究利用山西省朔州市子林牧场2016年~2021年间1034头1胎~7胎荷斯坦牛DHI数据和繁育记录,首先运用SPSS软件的GLM过程对荷斯坦牛产奶性状和繁殖性状进行非遗传因素分析,之后通过DMU软件AI模块采用重复力模型和单性状动物模型对荷斯坦牛的产奶性状、繁殖性状进行遗传参数估计,最后选取表型信息较完整的100头荷斯坦牛进行基因组评估,分析基因组评估效果,并构建朔州地区荷斯坦牛选择指数。获得
学位