基于生成对抗网络的点云增强方法研究

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:xuyaya
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
在三维视觉领域中,点云是一种经典的表示方式。基于激光雷达等物理传感器采集到的点云数据存在着含噪声、低分辨率等问题,无法满足如自动驾驶、虚拟现实等计算机视觉的应用需求,因此对点云数据增强方法的研究有重要意义。即给定分辨率较低的点云作为输入,通过点云增强方法得到稠密、高分辨率的点云。传统方法多使用对称性假设、数据库先验模型匹配等算法完成该任务,存在对噪声较为敏感和通用性较差的问题。近年来,随着Point Net和Point Net++的提出,人们可以使用神经网络中的自动编解码器结构直接处理点云数据,充分挖掘和提取点云数据特征,在处理点云的分类、分割问题上有成功的应用。相对于自动编解码器结构,生成对抗网络利用对抗博弈的思想,充分探索在空间中的潜在分布,在二维图像的超分辨等领域中表现出了巨大的潜力,且目前在点云数据增强中的应用较少。因此,本文采用生成对抗网络的思想构建点云增强网络,旨在对含噪声的、分辨率较低的输入点云进行增强,提升点云质量。本文的主要工作如下:首先,本文针对点云增强任务,搭建了基于生成对抗网络的框架,设计了一种基于稠密连接图卷积的点云增强网络,主要分为生成器、判别器两部分,通过生成器产生负样本,并结合原有作为正样本的标签点云训练判别器。在生成器中,通过最近邻算法构建图的结构,对多个包含跳跃连接的图卷积模块进行整合,旨在提取并聚合网络中不同尺度的特征,并使用位置编码模块增强网络对点云空间信息的感知。在结合生成器损失、判别器损失、重建损失和分布损失的联合约束下,得到最终分辨率较高的稠密点云。其次,为了加强对输入点云数据的长距离信息的提取能力,并加强局部邻域特征之间的联系,本文在上述方法的基础上,在生成器引入自注意力和局部注意力机制,并在判别器引入自注意力机制,提出了一种基于注意力机制改进的点云增强网络,进一步提高点云增强的效果。最后,本文在Visionair等数据集上进行实验,通过本文的两种方法,可将预测后点云的数据量提高为原始输入数据量的四倍。定量的结果表示,与基于Point Net++的方法相比,基于注意力改进的方法使倒角距离从0.98×10-3降低至0.52×10 3-,并且在不同的输入数据上有一定的泛化性。此外,本文对不同分辨率输入和不同噪声输入的数据上进行测试,进一步验证了基于注意力机制改进点云增强网络的有效性和鲁棒性。
其他文献
工业互联网作为国家十四五规划中现代化基础设施体系的重要新型设施,是工业领域和信息技术结合的新型应用模式。轴承是工业互联网中现代机械设备系统的重要组成部分,为了提高系统可靠性,需要部署于边缘设备的故障诊断模型实时检测轴承信号状态。使用轴承振动信号进行故障诊断面临噪声干扰、诊断数据短缺以及诊断计算开销大的挑战,亟需提出故障诊断的方法以实现轻量化精确诊断工业设备数据。现有以循环神经网络为代表的轴承故障诊
学位
单细胞转录组测序技术(single-cell RNA sequencing,scRNA-seq)是当前从单个细胞水平上研究其转录状况、分析差异基因和识别细胞类型的有力工具。由于生物方面和技术层次的原因,scRNA-seq数据具有样本量大,高维稀疏的缺陷,给其聚类分析带来了巨大挑战,且当前大多数细胞聚类算法仅利用scRNA-seq数据分析细胞的异质性,导致细胞聚类准确性低。非负矩阵分解(Non-ne
学位
在当前追求可视化和信息化的时代,图像传感器作为采集图像信息的工具,已经被广泛应用于手机、汽车、医疗、探测、安防等领域。随着CMOS工艺技术的进步,CMOS图像传感器的性能逐渐赶超CCD图像传感器,并因其易集成、低成本、低功耗的特点,逐渐占据了主流市场。而随着科技的发展,人们对图像传感器的性能要求也在提高,传统CMOS图像传感器的动态范围已经无法满足许多领域的需求。对数结构的CMOS图像传感器在动态
学位
近年来,集成电路技术产业迎来新的发展契机,广泛应用于消费类电子产品的电源管理芯片领域获得良助,开关电源作为核心成员,因其高功率密度、宽应用范围、多功能特性等优势,备受当前市场垂青。本文结合传统降压型DC-DC输出电压范围窄、因工作频率单一而无法应对噪声敏感型应用的不足,设计了一款恒频可调、宽压高效的降压型DC-DC转换器XD2112。本文植根于降压型DC-DC的理论研究,选用脉冲宽度调制和双环控制
学位
随着科学技术的飞速发展,数据的获取方式和内容形式获得了极大的提升,如何从复杂的数据中挖掘出最有效的信息成为制约模式分类算法性能的关键问题。本文立足于表示学习框架,并借鉴深度学习理论,对表示学习的三个主要分支即协作表示、子空间表示,字典表示分别展开研究,提出了隐子空间协作表示、深度字典对表示等系列算法,以提取数据中的有效表示特征进行分类,所取得的研究成果如下:针对由于原始数据中存在噪声和冗余特征以及
学位
遥感影像技术是上世纪60年代兴起的一门对地观测技术,它是依据电磁波理论运用多种传感器对远距离地面目标的电磁反射信息进行收集、处理并最后成像,从而对地物目标进行探测与识别的一种综合性技术。遥感影像技术在海洋资源监测,农作物产量估计以及灾害监测领域有着非常重要的实用价值,因而一直以来都是热门的研究方向。近年来随着高性能传感器的推陈出新以及遥感卫星从军用化迈入商业化的快速发展,大量高光谱、高分辨率、多时
学位
数字信号具有再生性强、有效性高、抗干扰能力强和便于加密等优点,所以在信息处理过程中,往往将所测的模拟信号映射到数字领域进行处理。模数转换器(ADC)作为混合信号处理过程中实现模数转换的必备器件,是现代电子系统的核心电路之一。随着集成电路技术的发展,数字领域的革新速度迅猛,ADC作为模拟系统和数字系统的接口,需要不断提高其功能和性能。在众多ADC架构中,逐次逼近型(SAR)ADC拥有高速高精度低功耗
学位
随着生物医学的迅速发展,各种形状和尺寸的身体中心植入物在临床医学上得到了广泛的应用,但是随着时间的推移,身体中心植入物可能会出现移位、损坏等各类问题,为了减少这些问题对人的健康造成威胁,我们需要对这类人群进行定期检测。身体植入物大多数是由金属及其合金制成的,在强磁场下金属会产生移位和发热等效应,许多传统的医学成像技术难以对其检测,故本文设计一套微波成像系统用于检测身体中心植入物。在微波成像中,首先
学位
随着数码相机、智能手机、平板、计算机等移动电子设备的日益普及,人类对传输高质量图像和视频的需求正在迅速增加。视频内容提供商保证最终用户的体验质量是一个关键问题。高质量的图像和视频数据对众多应用也至关重要,例如3D电视系统、监控系统、移动视频系统和会议系统。在视频数据到达最终用户之前,需要经过三个主要阶段:由捕获设备生成、使用编解码器进行压缩、通过通信信道传输。在这三个阶段过程中,视频都可能会产生各
学位
红外小目标检测是对红外图像中的小目标进行定位和分割的技术,其在精确制导、武器制造和监控预警等领域具有重要的应用价值。但由于成像距离远、成像环境复杂,且小目标的辐射强度受大气辐射和环境辐射的影响而被削弱,导致红外图像中的小目标具有尺寸小、信号弱、形状纹理特征不清晰等特点。因此,红外小目标检测是一个具有挑战性的研究课题。基于红外小目标的特点,本文将检测任务建模为更细粒度的分割任务,并选择UNet作为基
学位