基于RGB-D视频的多模态手势识别

来源 :计算机系统应用 | 被引量 : 8次 | 上传用户：juannayuan

【摘要】

：

本文是对SKIG RGB-D多模态的孤立手势视频进行手势识别研究.首先将RGB和Depth两种单模态视频提取成图片的形式保存,然后采样成长度为32帧的手势序列分别输入到本文提出的稠密连接的3DCNN组件学习短期的时空域特征,然后将提取的时空域特征输入到卷积GRU网络进行长期的时空域特征学习,最终对单模态训练好的网络进行多模态融合,提升网络识别准确率.本文在SKIG数据集上取得了99.07%的识别准

【作者】

：

马正文蔡坚勇刘磊欧阳乐峰李楠

【机构】

：

福建师范大学光电与信息工程学院,福建师范大学医学光电科学与技术教育部重点实验室,福建师范大学福建省光子技术重点实验室,福建师范大学福建省光电传感应用工程技术研究中心,福建师范大学智能光电系统工程研究中

【出处】

：

计算机系统应用

【发表日期】

：

2018年12期

【关键词】

：

手势识别稠密连接的3DCNN 卷积GRU 时空域特征 gesture recognition densely connected 3DCNN convolut

【基金项目】

：

福建省自然科学基金(2017J01744).

下载到本地 , 更方便阅读

下载此文赞助VIP

声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架

论文部分内容阅读

其他文献

带相关反馈的基于深度神经网络模型的人脸检索方法

针对大规模人脸检索问题,提出了一种带相关反馈的基于深度神经网络模型的人脸检索方法.首先利用卷积神经网络对人脸进行特征提取,再利用传统的检索方法进行人脸检索,在检索环

期刊

人脸检索卷积神经网络哈希检索相关反馈face retrieval CNN hash retrieval relevance feedback

Prognostic value of cancer stem cell markers CD133, ALDH1 and nuclear β-catenin in colon cancer

Objective: Colon cancer is one of the most common human malignancies. Cancer stem cells(CSCs), despite being only a small subset of cancer cells, have the capab

期刊

结肠癌预后细胞标记癌症价值恶性肿瘤肿瘤干细胞蛋白表达colon cancer cancer stem ceils （CSCs） CD133

Reconstruction of anterior skull base defects using frontalis muscle galea aponeurotica skull pedicl

我们的学习的目的是重建的目的前面的颅骨的软、难的组织穿孔缺点与一条联合 craniofacial 途径在 1 阶段基于外科的过程。前面的颅骨底的方法软、难的组织缺点成功地与 1 或

期刊

肿瘤临床治疗化疗skull base reconstructive surgery bone reconstruction classificati

Randomized trial of weekly docetaxel and cisplatin combined with concurrent 3DCRT in patients with l

这使随机化的控制临床的研究是估计并且比较二 chemoradiotherapy 政体的功效和安全的目的[cisplatin +5 氟尿嘧啶 + 3 维的保角的放射治疗(3DCRT ) 和 cisplatin + 周刊 doc

期刊

多西紫杉醇随机试验食管癌顺铂患者放疗三维晚期esophageal cancer chemoradiotherapy docetaxel c

Appropriate posture of cancer patients treated wit PICC to prevent internal jugular vein ectopic

期刊

癌症患者静脉姿势处理机光线效果对照组导管发生率peripherally inserted central catheter （PICC） in

Cystic liver metastasis of gastric cancer： report and analysis of two cases

期刊

胃癌肝临床表现切除术淋巴结本体论患者化疗gastric cancer cystic degeneration liver metastasi

The analgesic effect of preoperative pregabalin in radical cystectomy for cancer bladder patients

客观在 pregabalin 为神经病的疼痛的治疗被同意了以后，初步的临床的研究在 perioperative 经期建议了一个可能的角色。到我们的知识，它从来没被学习过在有癌症的病人的 pregab

期刊

镇痛作用膀胱癌切除术巴林患者围手术期药物用量平均时间pregabalin lyrica cancer bladder acute post

Clinical pathology analysis of esophageal sarcomatoid carcinoma

期刊

食管癌肉瘤病理分析临床细胞角蛋白免疫组化染色食管肿瘤CT图像esophagus sarcornatoid carcinoma barium

Study of the Dextran-DTPA-Gd at rabbit popliteal fossa lymph node metastasis from thigh transplanted

Objective: The aim of the study was to investigate the developing situation of the interstitial magnetic resonance(MR) lymphoid contrast agent Dextran-DTPA-Gd t

期刊

新西兰兔淋巴结葡聚糖磁共振移植间质VX2肿瘤钆magnetic resonance （MR） lymphography Dextran-DT

基于SVD的人脸对称性的两步人脸识别算法

为了缓解人脸图像容易受光照、表情和姿态变化对人脸识别的影响,Yong提出了利用了人脸的对称性产生新的样本来表示人脸特征的方法.这种方法可以反映出人脸样本由于表情、姿态

期刊

人脸识别奇异值分解图像镜像对称图像face recognition SVD mirror image symmetrical image

基于RGB-D视频的多模态手势识别

与本文相关的学术论文