数据驱动的人体形状补全技术研究

来源 :华东师范大学 | 被引量 : 0次 | 上传用户:seaking888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
三维人体形状补全是计算几何分析和计算机视觉中的一个重要问题,随着三维形状捕获设备的发展,三维形状数据变得易于获取,但由于设备精度等因素的限制,得到的形状往往是破损的。在计算机动画设计过程中,若可以对破损的人体形状进行快速补全,则可以基于现实人体形状进行快速建模;同时,快速补全人体形状可以让自主无人系统以更高的精度感知人类的存在,提升人机协同效率。传统过程化补全方法依赖手工建立的几何和概率模型对破损形状的缺失部分进行重建,其设计过程耗时,且每个算法的适用范围较为有限;相比而言,数据驱动方法通过从形状数据的分布规律中学习数学模型和其参数实现补全,其设计步骤简单快速,且具有较强的泛化性能。现有数据驱动的人体形状补全方法虽然能给出较好的补全结果,但其需要引入体型完全相同的完整人体形状作为辅助输入,或需要引入点级配准信息和耗时的搜索过程,这限制了其应用范围和性能。本论文在数据驱动方法的框架下研究并提出新的人体形状补全方法,利用大量人体形状数据训练神经网络模型提取人体形状的体型和姿势特征以实现从破损形状输入到补全结果输出端到端的形状补全,论文主要工作如下:1)本论文提出了一种基于给定姿势信息的人体形状补全方法。该方法通过两个特征提取神经网络分别从破损人体形状和骨架关节点坐标中提取体型特征和姿势特征,然后通过一个合成神经网络合成补全结果;当骨架关节点缺失时,有效的姿势特征还可以通过采样来随机生成。2)为进一步从破损形状中直接推理姿势特征而不用人为给定,本论文提出了一种基于特征解耦学习的人体形状补全方法。该方法通过在线数据增强和骨向量约束策略训练两个神经网络分别提取和还原破损形状的体型和姿势特征;并利用一个合成神经网络合成补全结果。3)为使上述方法更准确地从破损形状中还原姿势特征,本论文提出了一种可嵌入上述方法的二阶段破损人体形状骨向量还原方法。该方法先从破损人体形状中提取存在的骨向量,再利用人体骨架的骨向量间关系估计缺失的骨向量,最后根据骨向量在破损形状中的存在性将两组骨向量合成最终还原的骨向量。实验结果表明,基于给定姿势信息的人体形状补全方法不仅可以给出符合输入姿势信息的补全结果,而且可以给出姿势随机的补全结果;基于特征解耦学习的人体形状补全方法可以端到端地给出比现有方法准确的补全结果,而嵌入二阶段骨向量还原方法后,该方法给出结果的准确度得以进一步提升。这些方法为数据驱动三维人体形状补全问题提供了新的解决思路。
其他文献
无铅铁电钙钛矿K0.5Na0.5Nb O3(KNN)作为介电性能和压电性能出色的氧化物代表,近年来受到了广泛的关注。作为新一代无铅压电陶瓷,KNN具有高机电耦合系数和品质因数等优良性能。并且对KNN此类环境友好型材料体系的研究有助于替代市场中铅基陶瓷锆钛酸铅,符合可持续发展的基本国策。在现有研究中,压电系数媲美铅基材料的改性KNN已可以成功制备。但难以解决的问题在于KNN的多晶相变共存区域是依赖于
科学技术的日益进步与发展,人们越来越追求于高精度的测量。频率作为现代物理中精度最高的物理量,许多不同的物理量的测量都转换到了频率的测量上,这就需要寻求更加精准的频率标准。光钟能将频率标准的精度提高到E-18或更高。由于它只在一个特定的频率输出激光,如果要用光钟开展高精度的精密测量,必须将光钟的频率稳定性、相干性和精度传递到其他光学或微波波段。于是,相位噪声优异的频率合成器便是实现这个目标的最佳手段
物联网(Internet of Things,Io T)由大量电子设备组合而成,通过互联网实现万物互联和信息共享。物联网已在许多领域得到广泛应用,如工业制造、智能家居、医疗健康等等。在这物联网发展如火如荼的年代,安全却成了阻碍其发展的重要原因之一。针对物联网的安全攻击不仅可能导致工作紊乱、财产损失,更有甚者将威胁到用户的隐私和生命安全。在万物互联的背景下,网络是恶意人员或组织发起攻击的主要途径,设
等离子体(Plasma)作为物质的“第四态”,蕴藏丰富的物理,化学内涵,现已广泛用于材料科学、集成电路制造、生物医学等不同领域。等离子体激发时产生的活性物质,对细菌、细胞等均有杀灭作用,所以,等离子体杀菌是生物医学领域的一个重要的研究方向。表面介质阻挡放电(Surface Dielectric Barrier Discharge,SDBD)是一种在大气压下产生非热平衡等离子体的放电方式,因其结构简
金文,是中国古代商周时期用于记录的主要书体。研究商周金文,对了解古代历史、考察古代社会生活等均具有重大意义。识别商周金文文字是基础性的工作,但目前其仍需由经验丰富的古文字专家费时费力地完成。随着现代计算机图像识别技术的成熟,特别是深度学习技术的发展,计算机实现文字识别的方法取得了巨大的进步,现今已可获得良好的识别结果。基于以上背景与需求,本文旨在使用深度学习相关技术,对商周金文文字识别任务进行研究
新型污染物(微塑料)产生的环境污染是当前面临的重大环境问题之一,在工业点源方面也涉及到大量的排放。本研究着眼于工业废水中微塑料污染问题,从工程控制技术的角度出发,在调研评估太湖流域工业污染控制技术与示范工程的基础上,探讨了太湖流域重点行业微塑料的分布特征及典型工业点源污染处理技术对微塑料的截留效应。为后续水环境污染深度治理及以微塑料为主的新型污染物工程控制提供理论依据与技术支撑。论文主要研究结论如
随着第五代移动通信技术(5th generation mobile networks,5G)的协议不断演进,通信网络的应用范围逐渐扩大。各行各业对室内定位的需求日益迫切。由于噪声、多路径效应、基站用户间的时间同步等影响因素,目前5G基站还无法提供可靠的定位服务。本文以5G的上行探测参考信号(Sounding Reference Signal,SRS)为基础,研究了5G系统在室内环境下实现定位的关键
随着科学技术的发展以及在“中国制造2025“的工业化革新的背景下,精密制造业技术突飞猛进,各种设备制造朝向精密化发展,这就对各种设备关键工件的制造精度要求越来越高,如何对工件进行高精度质量检测成为一个亟待解决的课题。本课题针对通用工件的表面轮廓高精度实时测量的需求展开研究。本论文设计搭建了一个通用工件轮廓测量平台,控制系统采用A3200运动控制器,数据采集方面选用STIL光谱共焦传感器,并使用双频
随着互联网的发展网络上的信息越来越多,尝试从海量的冗余信息中挖掘出对用户来说有价值的信息,可以提高用户获取有用信息的效率;同时,从大量非结构化数据中获取结构化的知识,构建知识图谱,可以方便用户准确高效的查询相关信息。实体关系联合抽取技术可以有效的解决这个问题,将实体识别与关系抽取任务结合,减少两个任务间的误差传播造成的损失。对于具体运用来说,从文本中识别出实体和关系构建三元组,在知识图谱、信息检索
癌症是一个世界性的重大公共卫生难题,而肺癌在所有癌症中占比最大,严重威胁着人类健康。对肺癌进行早筛,进而对确诊的肺癌进行早期干预,可以有效降低癌症死亡率。因此,研究较为精确的计算机辅助检测系统用于辅助放射科医生进行肺结节筛查,提高诊断效率及准确率显得至关重要。高效精确的计算机辅助检测可以有效帮助放射科医生快速准确地发现肺结节区域,进而缓解医疗资源急剧紧缺的问题,提高肺癌患者的五年生存率。本文在3维