基于运动想象的3D CNN模型及实时控制系统研究

来源 :河北大学 | 被引量 : 0次 | 上传用户:huangli_java
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
脑-机接口(Brain-Computer Interface,BCI)通过计算机算法识别大脑活动并生成控制指令,构建了大脑与外部设备之间新型的通信方式。运动想象(Motor Imagery,MI)脑电信号(Electroencephalogram,EEG)因具有受试者主动想象而不需要外界刺激的特点,被广泛使用在BCI系统中,MI BCI也被认为是最具有潜力的方向之一。由于人类脑电信号存在微弱、非线性、非平稳性、信噪比低、个体差异性大等特点,造成了MI信号分类准确率低、训练跨被试模型难度大、以及在线系统性能有待提高。因此,开展对MI信号的分类和MI BCI的研究具有重大意义。针对上述问题,本文设计了一种基于多尺度时空特征3D CNN(3D Convolutional Neural Network,3D CNN)模型用于MI信号分类,并将其成功应用于基于MI信号的Tello无人机实时控制系统。主要工作内容如下:(1)针对脑电信号信噪比低、个体差异大并且以二维矩阵形式作为数据表示方法忽略了电极之间的空间拓扑关系等问题,本文设计一种基于多尺度时空特征3D CNN模型用于MI信号的分类,在单被试和跨被试分类实验中均取得了较高准确率。模型主要包含三个模块:3D数据表示模块、3D空间注意力模块和多尺度时间片注意力模块。在主网络中保留不同的模块并进行特征可视化,证明两个模块的有效性。通过绘制混淆矩阵和T-SNE图,对不同模块的作用进行定性和定量分析。在BCI IV 2a数据集中,5次十折交叉验证的平均准确率为93.06%。在HGD数据集取得了97.05%准确率。同时,进行了跨被试分类实验,在BCI IV 2a数据集上取得了63.27%的准确率。这表明了本文设计的方法与其它模型相比,具有更好的泛化能力和鲁棒性。(2)针对模型的实时性和实用性,本文搭建了基于MI信号的Tello无人机实时控制系统,设计并实现了四分类运动想象实验范式。系统使用基于多尺度时空特征3D CNN模型,结合数据采集模块、离线训练模块、在线解析模块和控制模块共同组成Tello无人机实时控制系统。通过采集受试者的数据进行离线模型训练,在线系统加载离线训练好的模型,最后实现对Tello无人机的控制。结果表明,受试者通过本系统实现了控制Tello无人机四个方向(前、后、左和右)的飞行,在线分类准确率最高达到90%,系统延迟时间最短为0.06 s。验证了该模型的有效性、稳定性和在实际应用中性能。综上所述,本文设计了一种基于多尺度时空特征3D CNN模型,提升了MI信号分类精度,并提高了跨被试分类精度,进而将模型成功应用于Tello无人机实时控制系统,证明了该模型应用于在线系统的可行性。
其他文献
人脸识别技术在身份认证方面有着显著的优势,且已成功应用到罪犯识别、人机交互、边防监控、智慧交通等领域,但多数算法仅在实验室条件下能够取得令人满意的性能,在非约束的真实自然条件下其识别效果较差,而日常生活中口罩、墨镜、围巾等因素造成的遮挡人脸识别问题是人脸识别在实际应用中亟需解决的问题之一,如何去除遮挡影响,挖掘人脸遮挡鲁棒表征具有较强的实际应用价值。因此,本文针对遮挡人脸识别方法开展研究,主要贡献
学位
随着现代工业和国民经济的蓬勃发展,人们对具备更高性能的各类存储器件的需求逐渐增高,对环境的保护和生物相容性的要求更加迫切。应用于铁电存储器中的铁电薄膜以Pb Zr1-xTixO3(PZT)和SrBi2Ta2O9(SBT)为主,PZT在使用过程中存在着污染环境和疲劳退化问题,SBT存在着自发极化强度小的缺陷。本文选择无铅Na0.5Bi0.5TiO3(NBT)作为研究对象,构建不同结构的铁电薄膜电容器
学位
在新兴的半导体存储器中,忆阻器因其独特的电流控制电阻变化进而实现数据存储的特点,以及在神经突触仿生领域的模拟特性,引起了广泛的研究。然而,虽已经提出了多种忆阻器存储类型,但其在电学性能表现方面存在诸多缺点,如:局部导电细丝引起的开关电压离散、耐久性能弱等。铁电存储器由于其可控的铁电极化反转特性,可以改善开关电压离散等缺点。铁电钙钛矿氧化物忆阻器的研究大都是在单晶衬底上,对现有铁电忆阻器硅互补金属氧
学位
人脸识别技术近年来发展迅速,并在多个领域应用广泛。然而,现有的人脸识别算法大多存在两个弊端:在训练样本较少情况下识别性能会急剧下降以及在种族间泛化性较差。针对上述两个问题,本文提出了一种基于深度多维空间扩充与多视角特征的单样本人脸识别算法,主要工作如下:第一,为测试算法在种族间的泛化性,在Mega Face数据集中收集了African、Asian、Caucasian、Indian四个人种,每个人种
学位
尖晶石型Li4Ti5O12(LTO)具有循环稳定性优异、零体积膨胀、电压平台稳定(1.55 V vs Li/Li+)、安全系数高和成本低廉等特性,被认为是最具有竞争力的新型储能材料之一。但Li4Ti5O12较低的离子电导率和电子电导率严重制约着其在高倍率下的充放电性能。本论文利用球磨辅助固相法制备掺杂改性的Li4Ti5O12负极材料,并通过Te元素掺杂来改善LTO负极材料的输运特性,进一步提高其电
学位
钛酸钡(BaTiO3)和氧化铋(Bi2O3)是两种重要的光催化半导体材料。由于本征半导体难以克服光生电子空穴的复合,因此限制了其光转化效率的进一步提高。本论文通过构筑单Z型BaTiO3/γ-Bi2O3异质结和双Z型BaTiO3/α-Bi2O3/γ-Bi2O3异质结,极大的提升了罗丹明B、四环素和诺氟沙星的光催化降解效率。采用水热法、共沉淀法和固相法制备了不同原料配比、不同煅烧温度和时间的BaTiO
学位
混沌系统具有遍历性、有界性、不可预测性以及同步等动力学特性。混沌系统在局部表现出不稳定性,但是整体却是稳定的,混沌吸引子在混沌吸引域中不断拉伸和折叠,形成了混沌系统复杂的动力学特性。相对于混沌系统,超混沌系统的Lyapunov指数中至少两个是大于零的,吸引子可以在更多维度上产生拉伸和折叠运动,其动力学行为更复杂。本文主要研究工作如下:本文提出了一个新的混沌系统和两个新的超混沌系统。并对这些系统的耗
学位
随着科技水平的不断提高,工业制造化水平也随之不断提升,工业机器人的应用领域从最初的搬运、喷漆等较为简单的作业到后来工程建筑和辅助医疗较为复杂的工作。智能化水平的提升,对于机器人性能上的要求也要跟紧步伐,对工业机器人进行轨迹规划可以有效提高工作效率或提升平稳性,因此,该研究方向成为相关学者关注的热点。本文选择的研究对象为六自由度工业机器人,首先完成建模工作,再借助3-5-3样条函数在关节空间上插值的
学位
随着互联网和移动互联网技术的迅猛发展,网站中的数据规模急速增长,为了解决出现的信息过载问题,推荐系统应运而生。推荐系统通过挖掘算法和数据分析技术推测用户兴趣并主动推送信息。传统的推荐算法通常仅利用单一领域中的数据,无法解决新用户的冷启动问题,并且算法性能会受到领域中数据稀疏性的限制。跨领域推荐可以通过迁移其他辅助领域的知识来缓解以上问题,提升推荐效果。基于此,本文开展了基于共享知识迁移的跨领域推荐
学位
在人类的生活与工作中,上肢起着至关重要的作用。近年来,由于意外事故或疾病的发生,上肢功能缺失甚至伤残的患者数量日渐增长,这些上肢问题会对患者的生活品质造成严重的影响。医学研究表明,康复训练是辅助恢复上肢运动功能最有效地方式之一。但在康复训练的过程中,由于对动作的熟悉度低或是术后肌肉力量差,患者十分容易因为肌肉疲劳的累积而造成肌肉损伤。同时肌肉疲劳还会引起肌肉代偿导致患者原有的运动模式改变,这种改变
学位