基于地址事件表示信号的动态手势识别方法

来源 :西安电子科技大学 | 被引量 : 0次 | 上传用户:sgrwflh
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手势识别提供了人机之间进行自然、直观交互的手段,具有很高的理论意义和实用价值。目前手势图像数据多由帧率为30fps的普通相机拍摄,这种基于帧的数据形式,在较为快速的手势运动情况下,会有运动模糊现象,影响手势识别效果。并且这种非需求驱动拍摄的方式记录了场景中复杂的背景环境,使得当前手势识别依然面临复杂背景下手势识别难问题。因此,受生物启发并结合了人类视觉系统中某些特定功能的事件相机逐渐受到了更多学者的关注。事件相机是一种基于地址事件表示(Address Event Representation,AER)的新型仿生相机,具有去除冗余信息特性、快速感知能力、集成处理方式、高动态范围的感光能力和低功耗特性等优势。其需求驱动拍摄的方式只记录场景中因手势变化引起的光照变化数据。本文主要研究了一种基于事件相机AER信号的动态手势识别方法。利用事件相机DAVIS240C拍摄预先设定的手势类型,得到相关的动态手势数据。手势运动过程中显著运动信息是产生AER信号的重要因素,因此利用运动信息提取预设手势中的关键手势,然后对关键手势进行识别。本文主要研究内容包括:1.利用卷积神经网络(Convolutional Neural Network,CNN)对设定手势进行识别。首先将三维AER信号进行转换,然后利用基于CNN计算光流的FlowNet2.0对转换后的信号进行划分提取关键手势,最后依然利用CNN网络提取关键手势特征进行手势识别。实验结果表明,事件相机的AER信号比普通相机的图像帧有更高的准确率,进一步说明,事件相机在一定程度上削弱了对训练数据的依赖,可以用相比于普通相机更少的数据取得相当的结果。与此同时,利用CNN网络搭建了动态手势识别平台。2.针对AER信号异步特性更合理的利用以及关键手势AER信号数据的更有效提取。本文利用事件相机优异的时间分辨率隐式带来的运动信息,以及筛选AER事件流中带有重要信息的特征事件,联合这两者灵活的提取关键手势事件流,然后在关键手势事件流的特征事件基础上,提取每个特征事件的时空特征,借助词袋(Bag-of-Words,BOW)模型完成最终的手势识别。由实验结果表明,在基于事件层面的动态手势识别方法获得了97.86%的识别准确率。
其他文献
红色档案是以文字、声像、图片等形式记录中华儿女在新民主主义时期和社会主义建设时期开展革命斗争、政治活动、社会经济建设等活动中所形成的具有保存价值的历史资料。它见
蛋白质作为生命物质基础,是整个生命活动的重要参与者。循环肿瘤细胞作为癌细胞转移的启动子,是癌症转移的重要指示。这两者均是重要的疾病标志物,其在人体内的含量与各种疾
为全面了解全市检察机关公益诉讼工作开展情况,推动新形势下公益诉讼工作高质量发展,促进依法行政和法治政府建设,为"精致城市·幸福威海"建设营造良好法治环境,3月中下旬,威
药物开发和食品安全是与人类健康和发展休戚相关的问题。传统药物开发的周期久、成本高、成功率低,最终能通过药监部门审批上市的候选药物寥寥无几。为了提高药物开发的成功
农业规模化发展是农村农业从传统农业走向现代化发展的过程,通过规模化经营,不仅仅可以延伸产业链,并且还可以实现农产品的深度开发与加工,可以在农业与加工、流通、社会化服务等领域促使一些新型行业的产生,从而带动农村的经济发展。对于农村而言,土地是农民关键性生产资源,也是维持生存的基本保障,但是在城镇化与社会化发展过程中,土地使用率较低,并且无法创造更多的经济效益。农村在闲置了大量的劳动生产力之后选择进城
随着工业互联网的快速发展,工业网络技术在工业系统中发挥了越来越重要的作用。其中,工业以太网作为工业网络的重要组成部分,在工业现场环境中得到了广泛应用。主流的工业以
生物传感技术是现代信息社会的前沿技术,是一个由生物、化学、医学、物理、电子技术等多种学科相互渗透形成的研究领域。在医疗诊断、环境监测、食品工业等领域都得到了高度
目的分析部分型肺静脉畸形引流(partial anomalous pulmonary venous connection,PAPVC)的胎儿超声心动图改变,总结其声像图特点及产前诊断要点。方法选择2012年1月至2018年6
会议
萨贺芬·路易斯是法国稚拙派油画家,出生于底层放牧家庭。她热爱着油画,家里贫穷没有油画老师,就自己探索学习。1912年德国收藏家威廉·伍德发掘了她,帮她开启了传奇的艺术人
在语文阅读教学中,课外阅读是不可或缺的一部分,其重要性不言而喻。课外阅读在语文教学中处于基础性地位,是一种很好的语文实践活动。课外阅读是学生学习知识文化的重要媒介,不仅能帮助学生了解课外知识,提高学生的语文素养,还能极大程度地丰富学生的精神生活。小学中高段是小学生发展的重要时期,若是能在这期间培养起他们浓厚的阅读兴趣、良好的阅读习惯,将会使他们终身受益。然而,在许多关于小学中高段学生课外阅读的文献