基于机器学习的手势识别研究

来源 :浙江理工大学 | 被引量 : 0次 | 上传用户:qq6563187
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着计算机图形学和虚拟现实技术的不断发展,对于人机交互的要求越来越高,其中作为人机交互主流方式的是手势识别。传统的手势识别都是基于相机照片和2D手势进行识别与分类,其提取的特征通常难以准确表示不同手势之间的区别。针对静态手势识别的高自由度、特征表示不准确等问题,动态手势的复杂时序、空间可变性、特征表示不准确等问题,将机器学习中特征提取、特征融合、特征降维、支持向量机等方法应用到手势识别中成为近几年的研究热点。如何有效地从手势数据信息中提取完整的手势特征并进行有效识别与分类是一个难点,而基于手势几何特性并融合多特征的手势识别方法是解决这一难题的有力工具之一。本文的主要工作以及取得的研究成果如下:1)为了克服静态手势数据集中不同手势具有的高自由度、特征表示不准确等问题,本文提出了一种融合关节旋转特征和指尖距离特征的手势识别方法。首先从手势深度图中利用手部模板,将手部看成链段结构,提取手部20个关节点的3D位置信息;然后利用手部关节点位置信息提取四元数关节旋转特征和指尖距离特征;最后利用一对一支持向量机对手势进行有效识别分类。实验表明,该特征表示能够很好地表征不同手势,在静态手势的识别中,利用该特征表示能够达到较高的分类识别准确率。2)为了解决动态手势数据集中复杂时序、空间可变性、特征表示不准确等问题,本文提出了一种融合动态手势全局运动和手掌内局部运动特征的动态手势识别方法,并提出了一种新的动态手势识别框架。首先在给定手部关节坐标的情况下,通过去除手势无效帧、补全关键帧、关节长度归一化等方法,进行动态手势数据预处理;然后根据动态手势中手的平移和旋转特征,并融合手掌内手指的平移和旋转特征,利用手势距离函数分段提取特征变化显著的手势帧作为关键帧;针对手势关键帧,再利用手部主方向向量之间的距离变化和手部中心点的位移变化特征来刻画手在空间中的全局运动,并利用关节旋转四元数中角度的变化和指尖的相对距离改变来表示手掌内手指的局部运动;基于融合手势全局运动和手掌内局部运动的关键帧手势特征,采用线性判别分析降维,并利用带高斯核的支持向量机最终实现动态手势识别与分类。实验表明,该方法能够有效提取动态手势中的关键帧,利用关键帧替代全部的动态手势帧,避免了数据冗余。基于手势特性,本文有效结合了手势的几何特点和时间空间连续性,实现了有效地手势识别。本文在阐述国内外手势识别研究现状的基础上,提出了具体的理论模型和相应的手势识别算法,并给出了算法的实验效果以及与其他现有方法的对比说明。
其他文献
从深度参与ITER计划,到聚变堆主机关键系统综合研究设施(CRAFT)建设和中国聚变工程实验堆项目(CFETR)逐步展开,我国核聚变行业近年来发展迅速。核聚变装置的高效运行与其配电
对6A02-T6铝合金型材淬火后停放时间对其抗拉强度的影响进行了研究,确定了合理的生产工艺制度,解决了该合金型材抗拉强度不合格的问题,生产出了满足用户要求和符合国家标准的
目前,我国在基金风格划分上没有形成统一的标准,更没有非常规范的分类体系,无法准确、有效、及时地对基金风格进行评估,致使基金存续期间的风格波动难以捕捉。此外,由于基金
美术是一门艺术,它源于生活,高于生活,又服务于生活。所以美术课堂与生活存在紧密联系,广大一线教学工作者应加强此方面的重视程度。这就需要广大美术教师积极转变自身的教学
刘作翔教授在其《回归常识:对法理学若干重要概念和命题的反思》(载《比较法研究》2020年第2期)一文中,对我国当代法理学研究中的一系列问题做出了全景式的评论和反思。其中
本文设计了一种基于CAN总线的多功能抢险救援车控制系统,该控制系统可进行近地和无线遥控两种控制方式,操作手可通过驾驶室内的操作手柄、触摸式显示器以及无线遥控器等操控
液压泵作为液压系统的能力装置、动力元件,其性能的好坏直接影响液压系统的正常工作。对液压泵气孔与气穴产生的原因进行了认真分析,并提出相应的措施来消除这类缺陷。
《语文课程标准》指出:“小学各个学段的阅读教学都要重视朗读”,我们在每篇课文的教学目标中都要求学生“正确、流利、有感情地朗读课文”。朗读是阅读教学中的一项重要任务,是
上坪钨矿床位于新华夏系于山构造带中段,黄沙——盘古山钨矿田的北西部,矿床位于上坪短轴背斜西翼,东西断裂带中央。矿区产出震旦系内接触带石英细脉带型黑钨矿,矿体为密集石
为了有效增强人们的信息安全意识,实现信息安全素养的科学测量,文中设计并开发了一套在线信息安全素养测评系统。文中首先从测评目标、内容、方法和指标体系四个方面阐明了信