基于立体视觉的复杂场景感知算法研究与实现

来源 :广东工业大学 | 被引量 : 0次 | 上传用户:sdrtgwdrtwertwert
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
立体匹配,即从一对立体图像估计视差信息,是机器人导航、自动驾驶、光电工程和计算机视觉领域的一项基本任务。目前该任务具有各种挑战性的问题,例如遮挡、无纹理区域、具有重复纹理的区域、薄结构物体等。立体匹配的传统算法涉及三个部分:代价计算、代价聚合和视差计算。传统方法通过约束手工制作的能量函数,或通过扫描线的形式在整张图像上计算全局交互,这种形式会消耗大量的计算成本并且准确度较低。随后研究人员引入了卷积神经网络CNN强大的特征提取功能,通过神经网络优化成本计算并与传统的代价聚合方法相结合,极大程度上改善了立体匹配的准确性,但它们仍然不足以在无纹理、遮挡的场景中进行正确的匹配并且难以训练。随着端到端深度学习算法的快速发展,立体匹配算法的准确率显著提高,端到端架构旨在直接估计立体图像的视差,以提高现实场景中具有挑战性区域的鲁棒性。本文主要围绕以下几个问题进行研究:(1)如何解决目前立体匹配算法无法充分利用全局上下文信息的问题;(2)如何对不同大小的目标进行差异性深度值聚类,充分交互跨尺度上下文信息;(3)如何消除现实场景中出现的表面反射以及各种噪声干扰现象;(4)如何以无监督的形式验证立体匹配算法的泛化性能。深度神经网络显著提高了视差估计的准确性。当前的一些方法存在对全局上下文信息的低效使用,这将导致不适定区域中结构细节的丢失。为此,我们全新设计了一个由三个核心模块(GDA、MPF、DCA)组成的立体匹配网络GAMNet,用于在具有不适定的现实环境中估计深度信息。首先,我们提出了一个轻量级的注意力模块GDA,整合了通道和空间维度上每个特征位置的全局语义线索。然后,我们构建MPF模块来融合来自特征金字塔不同层次的语义和上下文信息。最后,我们使用DCA模块和3D卷积组成的堆叠编码器-解码器聚合成本量,过滤匹配线索的传输并捕获丰富的全局上下文。在KITTI 2012、KITTI 2015、Scene Flow和Middlebury-v3数据集上进行的大量实验,证明了GAMNet在保留轮廓细节的视差预测方面超越了之前的方法。此外,我们在无监督模式下为端到端立体网络首次提出了空间抓取点3D场景重建线性评估策略,并将其部署在我们设计的机器人视觉引导系统上。在应用实验中,该方法可以产生密集的高精度3D重建,并以具有竞争力的推理效率完成复杂现实世界场景中的抓取任务,充分体现出本文算法出色的鲁棒性能。
其他文献
生物化学课程是研究生命现象、揭示生命科学的重要专业基础课,蕴含着丰富的思政元素。为促进生物化学课程教学与思政教育的有机融合,笔者开展了混合式教学实践探索,首先分析了生物化学课程教学与思政教育融合的现状;其次总结了混合式教学模式在思政教育中的应用优势,从教学目标、教学内容、教学过程和教学评价等方面深入挖掘、提炼思政元素,提出了思政元素融入生物化学课程的混合式教学措施;最后探究了混合式教学模式的前景,
学位
本文利用铜仁市新一代多普勒天气雷达和地面常规观测资料,对2013—2018年铜仁市雷雨大风天气进行统计分析。结果表明:铜仁市雷雨大风天气占比超过40%,有明显的时空变化特征;对反射率因子、回波顶高、垂直累积液态水含量、径向速度和风廓线等雷达产品资料特征的分析发现,在雷雨大风发生前后,雷达产品资料具有较明显的变化特征,可为及时、提早地预报预警雷雨大风提供参考。
钉钉、希沃易课堂、微课等是线上教学强有力的助力。实施小学英语线上教学时,教师可以以钉钉教育平台为主,以希沃易课堂、微课等为辅,以课前、课中和课后阶段为落脚点,联系教学内容,应用多样方式引导学生进行线上学习,转变学习方式,掌握学习内容,发展学习能力,增强英语教学效果。基于此,本文主要从课前、课中和课后三个阶段入手,阐述小学英语线上教学策略。
<正>一、作品内容简介近年来多媒体技术的发展为教师带来了丰富的教学资源和多元化的授课方式,结合实体和网络资源的多模态表现形式渐成趋势。其中视频素材虽然常被应用在对外汉语教学上,然而针对视频博客(vlog)应用于国际中文教育的实证研究尚少。本文以vlog为研究切入点,分析了其不同于博客和影视作品的特点,参考提问互动法和拟真情境的跨文化交际教学模式,尝试将主题vlog融入对外汉语教学中。有鉴于资源搜集
会议
目的观察参苓白术散合消瘰丸治疗儿童腺样体肥大(AH)的临床效果。方法选取新余市中医院2020年1月至2022年4月收治的80例AH患儿,依随机数字表法分为对照组与治疗组,各组均40例;对照组用内舒拿喷剂治疗,治疗组用参苓白术散合消瘰丸治疗,治疗周期为8周;对比两组临床疗效、临床症状量化评分、腺样体肥大体积评分。结果治疗组总有效率(90.00%)较对照组(70.00%)高,差异有统计学意义(P<0.
<正>小学三年级是英语学习的起始年级,学生对英语这一门新学科充满了好奇和兴趣,但是相较于高年级学生来说,三年级学生英语自学能力相对不足,学习专注度和持久性也不如高年级学生。想要更顺利地实现线上教学与线下教学的衔接,教师就需要及时掌握学生线上学习情况,分析线上教学的优点与不足,并且结合学生的实际情况进行过渡教学,实现有效衔接。
期刊
地铁站、隧道相对比较封闭,火灾发生时,乘客更容易产生中毒、窒息的情况,因空间有限、人员密集,更易发生踩踏事故。基于此,文章对地铁车站、隧道通风系统的运行模式以及防火处理进行研究具有重大意义。
土壤盐渍化严重限制了大豆的生长和产量提升,为探究外源调环酸钙(Prohexadione-Calcium,Pro-Ca)缓解大豆苗期盐碱胁迫的机理,以大豆品种‘合丰50’(耐盐)和‘垦丰16’(盐敏感)为试验材料,采用盆栽试验法,研究叶面喷施100 mg·L-1 Pro-Ca对110 mmol·L/1盐碱胁迫下大豆苗期形态建成、生理特性、叶片超微结构和转录组测序的影响,旨在揭示Pro-Ca缓解盐碱胁