基于深度学习的人体点云骨架提取方法研究

来源 :重庆邮电大学 | 被引量 : 0次 | 上传用户:zhengwei2
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维人体骨架在人机交互、增强现实和医疗保健等领域有着广泛的应用。随着三维扫描技术的发展,点云数据的获取更加便捷,从点云中提取三维人体骨架对于三维场景理解具有重要意义。传统的点云骨架提取算法在处理一些较为复杂的人体点云模型时可能会出现分支缺失、骨架断开等错误,并且不能获取具有语义信息的三维人体骨架,因此其应用场景非常有限。近年来,深度学习在语义推理方面展现出了较强的性能,基于深度学习的3D人体姿态估计方法发展迅速,然而现有的3D人体姿态估计方法大多以图像为输入,不能直接处理点云数据。尽管现有的点云深度学习方法在物体分类和点云分割任务上取得了成功,但是点云的稀疏特性以及人体骨架回归的高度非线性使得将这些点云深度学习框架扩展到人体点云骨架提取上仍面临一些挑战。针对上述问题,本文在点云深度学习框架Point CNN的基础上,提出了一种基于深度学习的三维人体骨架提取方法。本文具体工作如下:1.通过基于深度学习的点云收缩策略将人体关节点检测任务转化为偏移向量回归以及语义分割任务,降低了从空心的人体点云中回归关节点三维坐标的难度。点云收缩策略使得位于人体表面的点云收缩至关节点附近,从而将每个表面点转化为对应的关节点预测值。然后对所有的关节点预测值进行筛选、聚集,得到最终的三维人体骨架。2.采用歧义消除策略在点云收缩前剔除原始点云中远离关节部位的歧义点,该策略避免了点云收缩阶段的一些错误和低质量预测,提高了偏移向量回归以及人体部位分割的准确率,从而降低了关节点回归误差。3.由于现有人体姿态数据集大多是由彩色图像或者深度图像组成,而且由深度图像转换的点云数据包含较多的量化误差及缺失,因此本文提供了一个小规模人体点云骨架数据集用于训练和测试。在人体姿态估计数据集UBC3V和本文提供的人体点云骨架数据集上的实验结果表明,与传统点云骨架提取方法相比,本文方法对较为复杂的人体姿态和包含缺失的点云数据具有更好的鲁棒性。与现有的基于深度图像的3D人体姿态估计方法相比,本文方法具有更小的误差。另外,本文还通过消融实验证明了本文方法中每个网络组件的有效性。
其他文献
随着生活水平以及科技水平逐步提高,移动机器人的使用逐渐渗透到基层生活中来。移动机器人逐渐开始具备感知,规划以及决策能力。其中行人检测的功能是完成其他规划任务的一项
雾化器在自动装配的过程中不可避免会产生一些装配缺陷,需要对其装配结果进行检测以保证产品的质量。为了实现和自动装配生产线的高效率衔接,需要采用机器视觉技术进行检测。
在中国沿海地区,风振对大档距架空输电系统的影响普遍存在,尤其是在台风登陆前后此问题尤为凸出。风振造成输电杆塔金具疲劳损伤,引起导线磨损甚至断线,严重威胁着输电系统的
随着我国无线通信技术和计算机技术的高速发展以及实际工程中日益增长的需求,网络化控制系统得到了学者们广泛的研究。相较于传统的控制系统,网络化的引入给控制系统带来了较
现代建筑施工企业已由过去直接从事建筑构件生产,转变为总承包经营管理模式。天津SJ公司作为一家以建筑施工为主业的企业,在历经房地产行业黄金10年发展之后成为天津市较大规
短波与超短波通信在远距离通信领域中扮演着重要角色。由于频段限制,短波与超短波天线普遍存在尺寸过大的问题,因此,宽频带电小天线成为短波与超短波通信领域研究的重点。通
目的:由于Cldn6属于预测细胞内蛋白和预测膜蛋白的范畴,故本研究以手术切除的组织作为样本,对其在肝癌组织中的作用和并发症进行了预测,并由学者们收集了用于免疫组织化学检测和组织学研究的标本。然后进行重复的实时PCR反应。同时进行变性和亲属定量研究材料和方法;为了更好地规划研究性学习,我们采用了比较多研究的方法。在图书馆学习期间,我们访问了相关医院,在那里我们可以获得肝癌患者的治疗数据。结果:CLd
目的探讨兔颈动脉粥样硬化(AS)狭窄模型中天冬酰胺内肽酶(AEP)的表达。方法将20只新西兰大白兔随机分成模型组(8只)、假手术组(6只)和对照组(6只),模型组通过手术损伤颈动脉
近年来,生成式模型在图像生成领域上得到了显著的发展与广泛的应用。人脸再扮演任务是该领域内的一个特殊课题,致力于将某一个体的头部动作与面部表情迁移到另一个体上,生成
由于信息技术的飞速发展,各种来源的数据以前所未有的速度在增加.量子信息处理由于其独有的性质在过去的几十年中变得越来越有吸引力.但是许多量子信号处理方法仅仅专注于整