基于分割先验的弱支撑平面三维点云增强方法研究

来源 :国防科技大学 | 被引量 : 0次 | 上传用户:never0005
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
虽然当前基于图像的三维重建已经取得了较大的成功,但是有一类物体表面的重建效果仍然不理想,这类表面在现实场景中非常常见,主要包括镜面物体(比如玻璃、水面等)和弱纹理物体(比如白墙、瓷砖地面等)的表面。在传统的三维重建框架中,该类表面在稠密点云重建过程后会出现点云缺失的情况,造成没有足够的点云支撑进行表面重建,所以称之为弱支撑表面。本文主要针对含此类表面中平面形状的场景(即“弱支撑平面”)的三维重建问题进行研究,在传统三维重建框架中加入点云增强的步骤进行改进。本文提出的弱支撑平面点云增强算法主要分为两个阶段,先对含噪的先验信息进行精细化,再利用精细化后的分割掩模施加平面约束,使得弱支撑平面转化为强支撑平面。因此,本文主要完成以下工作:(1)提出了一种弱支撑平面单掩模驱动的多视图分割方法。以初始平面分割掩模为基础,深度图与置信度图边缘信息为导向的方法,生成多视图精细化分割掩模,提升平面分割先验信息的精度。首先,将初始平面分割掩模中高置信度的像素点反投影到三维中。接着,在RANSAC框架下进行平面拟合,得到弱支撑平面在三维中的表达参数。然后,通过聚类算法,得到该三维平面的区域位置。最后,通过弱支撑平面边框上的三维点重投影到各个平面可见视图中,得到准确的多视图平面分割掩模。(2)提出了一种基于平面约束的稠密点云增强方法。针对弱支撑平面缺乏点云支撑这一问题,有效利用多视图平面分割先验等信息,进行弱支撑平面中的错误点云校正与缺失点云补全。首先,从弱支撑平面的空间参数出发,对高置信度三维点拟合平面的过程进行分析,得到弱支撑平面在三维空间中的法向量。接着,依据平面法向量与精确的多视图分割掩模等信息,基于重投影的方法对弱支撑平面中位置错误的点云进行校正。然后,使用单张分割掩模施加平面区域限制,通过像素反投影对弱支撑平面中缺失点云补全,并对补全点云在弱支撑平面法向量的方向上添加轻微扰动,最终实现了弱支撑平面的点云增强。为了验证本文方法确实优于传统三维重建方法,本文在DTU标准数据集与自行采集的数据上进行实验对比,并对重建结果进行了分析。首先,在DTU标准数据集上进行定性与定量的实验比较,结果表明本文方法重建的三维点云具有较好的准确性与完整性。接着,在自行采集的真实场景数据集上进行表面重建效果对比,本文方法能够准确完整地恢复出弱支撑平面。最后,对传统三维重建框架加入本文点云增强算法前后的重建结果进行对比,充分证明了本文方法的有效性。
其他文献
机械臂的目标分类抓取问题可以分为抓取检测和抓取执行两个部分。抓取检测部分是从相机的图像信息中识别出待抓取物体的类别并检测出机械臂末端的抓取位姿配置;机械臂抓取执行部分则是规划机械臂的轨迹并控制机械臂运动到目标位姿,从而实现对目标的抓取,并将其放置到确定位置。首先,本文搭建了机械臂分类抓取硬件系统,并通过手眼标定方法得到深度相机坐标系和机械臂基座坐标系的坐标转换关系。本文基于该硬件系统,提出并实现了
操舵系统是控制舰船、潜艇等军事装备运行轨迹和姿态的关键组成部分,其运行状态直接影响装备在实战环境下的战场生存能力,对确保装备能够安全可靠地实现多样化作战任务具有重要意义。在采用基于模型驱动的方法对操舵系统运动状态进行分析研究时,由于环境变化和量测误差等因素的影响,操舵系统物理模型中的摩擦系数、材料泊松比等关键参数会呈现出一定程度的不确定性。然而,现有的物理模型中,这些参数常常被视为常数而忽略了当这
现在外骨骼驱动器大多是采用常规驱动器(直驱)或者电机集成谐波减速器带动负载,由于外骨骼与环境之间的作用不同于其他机器人,是直接作用于人体肌肉关节,考虑到外骨骼人机交互的安全性和续航能力,本文研究串联弹性驱动器(Series Elastic Actuator,SEA)作为外骨骼驱动源具有的优点。本文是在详细研读了SEA在物理建模、控制算法、储能节能和应用领域等研究热点的论文基础上,从外骨骼对驱动器的
概率论与数理统计课程是我国高校理工科和经管类专业学生的基础课和必修课,以往教学方法下,学生会出现概念难以理解、方法难以掌握等问题,而疫情防控初期的大规模纯线上教学中又出现了网络(系统)卡顿、教师不适应线上教学、学生上网课时注意力不集中、教学评价模式单一、学生听课状态无法保障及教学效果不理想等问题。针对概率论与数理统计课程线上线下教学过程中存在的问题,提出三位一体的线上线下教学模式,为后疫情时代的课
随着全球卫星导航系统GNSS(Global Navigation Satellite System)技术日益成熟,GNSS已成为室外定位的最佳选择,在测绘、航空、航海、交通、气象等诸多环境中广泛应用。但在室内环境中,由于信号的遮挡,存在GNSS不可用的问题,因此,在室内环境中如何进行有效的定位,是一个亟待解决的问题。不同于以往足部式穿戴微惯导设备或者手持智能手机进行定位导航,本课题聚焦于穿戴更为方
世纪之交的几次局部战争中,无人机体现出极高的军事价值,成为各国军方研究的热点之一。近年来,通信技术的进步以及人工智能的应用,促进了无人机集群技术的发展,使得未来无人机集群化、有人/无人协同作战成为可能,推动着战争模式的根本性转变。融合导弹与无人机特性而设计的小型作战用无人机,为现代低成本高收益的作战模式提供了一种有效手段。本文以小型无人机为研究对象,针对多无人机在协同打击过程中的协同到达问题进行研
目标检测作为图像理解和计算机视觉的一个分支,是大量视觉任务的必要前提,当前也是机器学习领域中的一个热门方向。目标检测被广泛应用于许多的领域上,例如道路交通车辆以及标识、安保系统中的检测、军事领域中目标的识别。针对不同的应用场景而言,目标检测核心思想都是要解决物体在背景中的精确定位。对于红外图像中的目标,检测目标并对其物体轨迹进行分析是实际需求中必须要解决的难点。由于红外目标本身的特征弱、颜色缺失,
学位
天基红外光学监视系统利用部署在多个轨道平台所组成的光学传感器星座,对弹道导弹、航天发射等重要事件进行实时探测、跟踪、识别以及预报。对国土安全可能存在重大威胁事件的即时发现,有助于快速反应及时决策,增强我国战略防御能力。在这种应用背景下,天基红外光学监视系统面临着多种类、多型号目标的威胁考验。所以天基光学监视系统采用的探测体制和其中涉及的信息处理技术对系统效能具有决定性影响。天基红外光学监视系统星座