论文部分内容阅读
无标识人体运动捕捉研究因其广泛的应用价值和学术价值,一直是计算机视觉领域内的研究热点。近年来,随着计算机软硬件的飞速发展,运动捕捉领域的研究不再仅仅局限于人体运动学姿态估计的动作捕捉,而是扩展到了从图像序列或视频中捕捉人体外形变化的表面捕捉。如今,表述人体姿态的运动数据已被广泛应用于影视娱乐等各个领域。与此同时,与每一帧相对应的捕捉对象的三维人体外形在影视、动漫、游戏、工业设计等领域也有很广泛的应用。本文围绕着基于人体模型构建的无标识运动捕捉这一课题开展工作,对其中的关键问题进行了深入的探讨,重点研究了以下三个问题:一是如何从图像序列中捕捉对应帧的三维人体外形;二是如何构建参数化人体模型,并用其生成动作捕捉的初始化模型;三是如何基于精细的三维人体模型结合局部优化和全局优化算法进行人体姿态估计,取得了如下研究成果:1.提出了一种基于三维模板模型的人体姿态和外形分步匹配的框架PSMA(Po se&Shape Model Adaptation)。该框架首先通过模板模型姿态的变换与目标图像中人体姿态相匹配,然后再进行模板模型的外形匹配。由于人体模型在外形变化时可能会引起人体姿态的微变,需要对人体的姿态进行二次的优化来得到最优解。三维模板模型取自各部分肢体轮廓显示清晰的首帧图像,可通过三维扫描或三维重建算法生成。姿态的变换通过内嵌的骨架来实现,外形的匹配通过拉普拉斯变形技术来实现。该框架适用于人体穿普通衣服或宽松衣服的场景中,可以有效的解决立体视觉算法重建出来的人体模型有拓扑错误的问题,并通过实验证实了其可行性。2.提出了一种基于人体参数化模型SCAPE来估计人体模型姿态参数和体型参数的方法。该方法将SCAPE模型应用在PSMA框架中,生成了可用于人体运动捕捉的初始化模型。模型姿态的变换通过内嵌的骨架来实现,而人体外形的匹配则是利用人体模型投影轮廓与图像轮廓的匹配误差,通过最优化一个像素距离函数来估计人体体型参数和姿态参数,得到了与捕捉对象相近的三维人体模型。通过用生成的三维人体模型与真实三维人体扫描模型或三维重建算法获得的模型做比较,证明了方法的有效性。3.提出了一个基于人体姿态先验知识约束的粒子能量函数。基于此函数,结合局部优化和全局优化算法,用于人体姿态的精确估计。该方法不仅利用人体轮廓匹配,也利用相邻图像帧的纹理匹配,提高了局部优化算法的精度。利用能量函数对用于全局优化算法中的粒子状态进行约束,有效的减少了粒子的使用数目和运行迭代次数,提高了算法的效率。同时,与采用粗糙的棍棒模型相比,用精细的人体模型具有更高的捕捉精度,并用实验进行了对比验证。