基于上下文建模的3D点云分割与分类

来源 :厦门大学 | 被引量 : 0次 | 上传用户:555jl
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
深度学习已经成功地被应用于解决各种计算视觉问题。但在无人驾驶、机器人技术等应用场景下,图片无法提供感知环境所需的全部信息。相比于图像,三维数据可以更准确地还原现实场景,在不同应用场景的推动下,处理三维数据逐渐成为热门课题,其中点云作为较为简洁的三维数据的表示形式,不论是获取还是应用上都十分简便,因此高效地分析点云是让机器理解三维数据的关键。然而现存的方法存在诸多问题,比如,在点云场景语义分割任务中,许多方法上下文感知能力不足,无法正确分割结构相似的不同物体,比如门和窗等。另外,当前方法的成功依赖于大量的有标签数据,然而在实践中,点云标注成本极其昂贵。同时,在点云分类任务中,由于严重依赖大量的训练数据,现有模型泛化能力不足,很难推广到新的类别。本文针对以上三个问题展开研究,研究内容如下:第一,针对现有方法容易混淆相同结构但不同类别的物体,设计了基于多层次上下文的大规模点云语义分割模型。本文首先借鉴自校准的思想,显式地建模不同尺度之间的上下文关系,同时提出语义相关上下文模块,对相同类别的点的特征进行约束。多个数据集的结果表明,本文方法能有效避免结构相似的物体带来的歧义,并优于同期算法。第二、针对标注成本昂贵的问题,本文对现有的点云弱监督方法所采用的标注方法进行了探讨,提出更加简单的标注方法。同时,针对监督信息不足的问题,设计了针对弱监督的点云分割模型。本文将点云补全作为辅助任务,在不引入额外标签的前提下加强了模型对部分点云与整体间的感知能力,此外,为了充分利用标签信息,本文提出类别注意力模块,通过利用类别原型对分割结果进行优化,进一步改善分割结果。实验表明,该方法具有优越的性能,在多个数据集上都极具竞争力。第三、针对在点云分类中,现有模型泛化性不足的问题,提出基于小样本学习的点云分类模型。本文使用度量学习来解决小样本问题。为了提高模型特征提取能力,使用自监督框架BYOL进行预训练,将所学知识迁移至小样本点云分类任务。同时,提出全局上下文推理模块,使得模型在预测类别时,能够结合每个类别的特征,作出更加合理地判断。实验结果表明,本文方法鲁棒性高、泛化性强,能够高效地解决点云小样本分类问题。
其他文献
在线色谱分析仪是天然气能量计量的核心设备,选取具备代表性样气是分析准确的源头保障,而取样位置合理设置则是考虑的重要环节。文章共论述两个观点,一是通过对不同类型计量站场取样口位置设置的合理性分析,说明不同取样位置对实际生产的影响情况;二是通过对同一站场多上载点多分输用户各取样点实时色谱分析数据的声速计算和统计分析,说明在同一站场不同分输点设置取样口的必要性,以期为新建和改扩建能量计量站场提供可参考建
期刊
应用层次分析法确定农业绿色发展水平评价维度和评价指标,应用熵权法确定评价维度和评价指标的权重,应用综合指数法从社会发展、经济增长、农业生产、生态环境4个维度对山东省16个地市的农业绿色发展水平进行综合评价。结果显示:山东省各地市的农业绿色发展水平较高(指数平均值为0.43),地区间发展水平差距较小。但是各地市在社会发展、经济增长、农业生产、生态环境评价维度上表现各异。
期刊
近年来,语义分割在多个领域得到了广泛的应用。随着深度学习的快速发展,基于深度神经网络的语义分割在分割精度上不断提高,但巨大的参数量和计算量限制了网络在硬件上的部署,因而设计轻量级网络成为目前语义分割领域的研究热点。然而,传统的人工设计方法耗时耗力,因此研究者们希望将网络的设计过程自动化。于是,一些基于神经网络架构搜索的语义分割方法被陆续提出,并利用知识蒸馏技术,使用性能较高的大网络指导轻量级网络的
学位
自现代社会尤其是工业革命以来,化石能源的过度消耗造成了重大的能源短缺问题,学者们不断进行了新能源以及新型能源装置的广泛研究,致力于完成能源的可持续开发和利用,而超级电容器因为其高功率密度和卓越的稳定性引起广泛关注。相比于电池,超级电容器尽管有着充放电速度快的优势,但是其能量密度过低限制了其商业化应用的进程。而选择适宜的材料组装超级电容器,提高单位电容是电容器应用的核心问题,过渡金属氮化物作为一种新
学位
作为我国一种新兴的金融机构,村镇银行在弥补农村金融服务缺位等方面作出了突出贡献,为农村经济增长和小微企业发展提供了重要的金融支持。然而,随着村镇银行的快速发展,村镇银行的信贷风险不断增多,出现资产质量下降、贷款不良率上升、违规开展业务等一系列问题。甚至部分村镇银行没有建立信贷风险管理机制,一旦发生大规模信贷风险,将给储户和国家造成巨大的损失。鉴于此,文章对新时期村镇银行信贷风险管理存在的问题进行分
期刊
深度神经网络由于其出色的性能被广泛的应用到了各个领域中,但同时深度神经网络也具有计算量和参数量较大的弊端,这样的特点阻碍了深度神经网络的进一步发展。近年来大量的研究关注于深度神经网络的压缩与加速,并提出了多种有效的方法。一种常用的方法是神经网络的剪枝,但目前的剪枝方法大多都依赖手工设计剪枝模型结构和单一的剪枝算法,在面对不同的硬件或者压缩目标时欠缺灵活性,并且在压缩率较高的时候难以维持原有的性能。
学位
箱包重识别目的在于对箱包进行跨摄像机跟踪,其在机场以及海关安检等地方对丢失箱包寻找或可疑箱包追踪发挥重要的作用。目前主流技术是通过射频标签来实现定位跟踪,该标签可能存在运输过程意外脱落、人为撕开以及受金属干扰等问题。箱包重识别作为新型跟踪技术可以作为射频识别的代替或补充。由于该技术不需要物理标签,因此不会存在上述的问题且能够降低成本。然而箱包具有姿态变化大、相互遮挡以及个体间存在极为相似等情况从而
学位
视频目标检测与跟踪作为计算机视觉中的基础问题,已被广泛应用于视频监控、无人驾驶、增强现实等实际场景中。然而,由于实际场景的复杂性,视频中的目标往往会受到遮挡、模糊、相机失焦等问题的影响。这些问题使得视频目标检测与跟踪方法在实际应用中存在一定的局限性。与图像不同,视频包含丰富的时空(Spatial-Temporal)信息。通过充分挖掘视频中丰富的时空信息,可以有效提高视频目标检测与跟踪的精度。鉴于此
学位
具有丰富分子轨道和多个能级的有机分子已成为微型分子电子器件和热电材料的良好候选者,分子结的电输运及热电性质测量对于分子导电机制研究具有重要意义,也为推动集成电路工业小型化和高效热电转换的发展提供了新思路。随着扫描隧穿裂结等精密测量仪器技术的开发和拓展,众多单分子结或分子膜器件的热电性质被广泛研究,并初步开拓了热电性质基于分子与电极的接触效应、长度依赖性、分子内部取代基团、外部环境调控的变化规律。进
学位
合理膳食是老年人保持健康、防治慢性病的最佳途径之一。当前中国社会老龄化进程加速,老年人膳食健康问题也逐渐突显。一方面,随着老龄人口的增加以及对膳食健康的日渐重视,社会中对老年人膳食知识的需求迅速增长。另一方面,老年人缺乏获取全面的膳食知识的途径,且难以分辨互联网中混杂的信息。基于此,本文在保证易操作性的前提下,设计并实现老年人膳食问答推荐系统,精准实时地为广大老年人及其家属答疑解惑,方便用户快捷地
学位