基于深度学习的毫米波雷达动态手势识别

来源 :江苏科技大学 | 被引量 : 0次 | 上传用户:physicalboy
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
毫米波雷达手势识别作为一种无接触式人机交互方式,在智能驾驶、远程医疗、体感游戏等领域具有广泛的应用前景。传统毫米波雷达手势识别方法将回波信号通过时频分析转换成频谱特征图,再按照图像分类的方法识别手势。这种通过预处理雷达回波获得的手势样本包含的特征信息会有损失,导致分类模型在其他数据上的鲁棒性较差。本文基于毫米波雷达回波的时间相关性特征,采用深度学习的时域建模方法展开研究,主要工作如下:1.传统的毫米波雷达动态手势识别方法,需要对手势回波中包含的距离、速度和角度等信息进行时频分析,从而得到各种特征谱图(序列),然后再利用各种分类模型对这些图片或序列进行识别,处理流程较为繁琐。本文提出一种基于串联式一维神经网络(One-dimensional Series connection Neural Networks,1D-Sc NN)的毫米波雷达动态手势识别方法。首先将手势回波序列以时序方式重新组合,然后搭建一维卷积层、池化采样层和一维的Inception v3等模块获取多帧手势的特征序列。最后将一维卷积模型获取的特征输入长短时记忆网络层(Long Short-Term Memory,LSTM)来聚合序列中的一维特征,利用多帧序列的时间关联性,提高模型的收敛速度和分类的准确率。实验结果表明,该方法适用于样本不充足的场景,对手势分类的准确率可以达到96.0%以上,优于传统的基于频谱特征图的动态手势识别方法。2.针对随机动态干扰环境下的手势识别问题,传统的手势识别方法鲁棒性较差,动态手势之间易相互混淆。本文提出一种基于自注意时序神经网络(Self-attention Time-series Neural Networks,Atten-Ts NN)的毫米波雷达动态手势识别方法。首先,按雷达回波的帧和序列特性堆叠数据块作为手势样本,并以时间分布层(Time Distributed Layers,TD)包装一维时序神经网络,提取每一帧序列的运动特征。然后采用帧间自注意机制模块计算多帧序列的权值分数,在获得帧间相关性的同时抑制随机干扰。通过Flatten函数衔接一维时序网络和注意力机制模块,最后用全连接层和softmax函数归一化手势类别的概率值。实验结果表明,该方法在随机动态干扰(如挥手或抛物)占比25%的情况下,可以达到98.43%的识别准确率。3.传统基于深度学习的动态手势识别模型在嵌入式设备上部署时,存在模型参数量较大,模型算子冗余和计算量大的问题,往往需要经过模型剪枝、压缩等加速算法的处理。本文提出一种基于知识蒸馏的毫米波雷达动态手势识别模型压缩方法。首先,在Atten-Ts NN模型的基础上简化模型结构,保留主要模块。然后调控温度值,并采用老师模型(Atten-Ts NN)指导学生模型的训练方式,对原有模型进行蒸馏。实验结果表明,蒸馏后的学生模型被大幅度压缩,在含有干扰的数据集中仍能保持98%以上的准确率。
其他文献
回转窑球团法生产球团矿的主要设备由烧结机、回转窑和环式冷却机组成,其中,烧结机起着重要的作用。在工业现场中,烧结机台车篦条若发生缺失,会使台车底部出现缺口,影响烧结品质,甚至导致烧结矿掉落,造成次生事故。烧结机台车车轴若发生故障,会导致台车车轮脱落甚至烧结机系统停产。目前,针对烧结机台车缺陷部件的检测仍然主要采用人工检查和维护的方式,人工检测效率低下且具有一定的滞后性。因此实现对烧结机台车缺陷部件
学位
在中国,中小微企业贡献了 50%、60%、70%和80%以上的税收、国内生产总值、技术创新和城镇就业岗位,是国民经济中不可或缺的组成部分。近年来,为促进小微企业发展,激发经济活力,普惠金融已成为政府推进的重要工程。商业银行(特别是国有大型商业银行)自然承担起了发放普惠型小微企业贷款主力军的社会责任。但是,由于小微企业自身抗风险能力弱、信息不对称性强、同时又往往缺乏合格的担保方式等原因,银行对其授信
学位
自2019年国家医疗保障局组织药品集中采购模式改革以来,中选药品的显著降价使得政策在降低医疗负担、节约医保支出、净化流通环境等方面效果显著。该项政策通过对药品价格信息的大幅调整和采购数量的再分配改变了现有市场格局,对政策涉及的药品均产生了深远影响。现有研究多将视角聚焦于中选药品,主要涉及政策实施前后中选药品在不同医院、地区、治疗领域采购情况的变化,但在研究方法与样本遴选上存在不足,且仅有少部分学者
学位
自从“全民健康”口号和“健康中国”战略提出以来,乘着信息科技快速发展的东风,我国健康产业的相关市场迅速扩张,许多移动健康类APP应运而生。而后,由于新冠肺炎疫情的影响:一方面,线下就医遇到了阻碍,人们不得不寻求移动诊疗类APP和各类互联网医院;另一方面,疫情也提升了人们对于健康的重视程度,使人们更加注重自身健康管理。这些都使得移动健康类APP发展迅速,用户群体规模越来越庞大。但是,这些也造成了移动
学位
高参数阀门在军工,矿业,海洋工业,火电核电等领域有着重要的应用,对整个系统的安全性和可靠性起到重要作用,但长期以来许多阀门技术被国外所封锁,技术不足严重制约我国制阀工业的发展,许多阀门存在可调节精度低,成本高,维修费用高维修困难的问题,在国家的打破封锁的需求下,进行的研究越来越多,国内技术在不断进步,在保证调节阀性能的同时,其指标要求不断提高,对噪声要求也越来越高,本文对空间转角蚁穴式调节阀的流场
学位
光伏发电因具有环保、可持续、运营成本低等优点,近年来得到了快速大规模发展。光伏组件是光伏发电系统的重要单元,在长期运行中受到环境、电应力等因素影响,易出现衰退现象,导致输出功率降低、寿命缩短、经济收益下降。分析光伏组件衰退机理及模式,并进行寿命预测,可为光伏组件的运行维护提供技术支持,对提升光伏发电系统的稳定性、可靠性和经济效益具有重要的理论和实用价值。针对光伏组件衰退分析与寿命预测问题,论文通过
学位
2022年1月1日“区域全面经济伙伴关系协定(RCEP)”正式在有关国家实施~1,标志着世界上最大的自由贸易区雏形得以初步奠定,中国对外贸易潜力也进一步扩大。然而近几年中国对外贸易也面临来自国内外的压力。首先,中国国内经济增长放缓,经济结构转型升级乏力是外贸发展的重大挑战;其次,RCEP其他成员国也存在不同的地缘政治背景,比如中日、中澳关系时常紧张,南海问题争端频发,东南亚部分国家经济发展相对滞后
学位
基层治理是国家治理的基石,党的十九届四中全会精神指出推进国家治理体系和治理能力现代化的关键一环是要重点夯实基层治理[1]。在基层治理中,基层公务员发挥着至关重要的作用,其职业幸福感与工作成效息息相关,在一定程度上也影响着基层治理体系现代化发展。因此,深入研究基层公务员的职业幸福感,从而找到提升职业幸福感的有效策略意义十分重大。在确定以福州市长乐区基层公务员群体作为研究对象后,开展一对一个人访谈,设
学位
本文是笔者参与跨国音乐制作项目的实践报告,该项目由中美两国团队合作为大型开幕式制作游戏相关音乐。笔者在译后总结时发现汉英交传中有较多译语冗余现象,影响了翻译效果。通过分析,这些译语冗余主要是因为过于追求形式对等而导致的。因此,笔者以口译录音为材料,结合奈达的功能对等理论,在对冗余相关研究回顾的基础上,对口译实践中出现的冗余现象进行分类分析,并提出相应应对策略。本文将冗余划分为词汇层面冗余,句子层面
学位
萱草(Hemerocallis fulva L.)是国际公认的三大宿根花卉之一,不仅可以作为观赏植物用于园林绿化及盆栽应用,而且具有较高的食用价值。乙醇脱氢酶(alcohol dehydrogerase,ADH,EC1.1.1.1)基因家族成员在抵抗非生物胁迫过程中起着重要的作用,但是不同的基因家族成员功能不同。目前关于ADH基因家族的研究主要集中模式植物中,在观赏植物中研究甚少。本研究以二倍体萱
学位