论文部分内容阅读
失语症形成的原因有多种多样，脑卒中等神经疾病是导致言语缺失最常见的原因。由脑卒中引起失语症可以通过言语康复训练进行恢复，从而提高他们的交流能力，让他们更好的融入生活。 近年来，随着计算机技术的发展，各种各样的计算机辅助系统开始介入言语康复训练。目前常用的训练软件是将图片文字和声音相结合，来构造一个视听反馈相结合的训练场景。近期有神经科学的研究表明，人类大脑的语言和运动机制是紧密联系在一起的，刺激大脑的运动区域会激活大脑相应的语言区域。因此，在言语康复训练的过程中加入动作训练，将提高言语康复训练的效果。 基于上述理论，本文将实物交互引入计算机辅助言语康复训练系统中，实现一个视听反馈与实物交互相结合的多通道言语康复辅助训练系统。本文使用Kinect来实现实物交互的接口，通过Kinect跟踪操作场景中的实物玩偶来提供交互反馈，实现实物交互和传统的言语康复训练相结合的新型康复训练。本文主要工作如下: 1.总结了国内外针对失语症患者进行言语康复训练的研究现状和进展。根据神经科学最新的研究结果——人类大脑的语言和运动机制有着紧密联系，提出将实物交互应用到言语康复训练系统中，从而构建基于动作的言语康复训练系统。 2.基于Kinect实现了实物交互接口。由于脑卒中引起的失语症患者往往伴随着不同程度的运动障碍，他们对用于交互的实物具有更加苛刻的要求，通常情况下要求物体较小。本文针对物体较小的特点优化了实物跟踪算法，从而提高跟踪精度和速度，增强了实物交互体验。 3.结合脑卒中失语症患者传统的训练过程和上述实物跟踪算法的特点，设计并实现了一个基于实物交互的言语康复训练系统。通过构建初级任务“在超市购买西红柿”和中级任务“在超市购买西红柿炒鸡蛋需要的食材”来验证系统的可行性和有效性。 4.在言语康复训练中心对6名不同症状的脑卒中失语症患者进行了言语康复训练，并收集了12位言语治疗师对系统的意见。结果表明通过训练，不同程度的患者能有不同程度的提高，系统对中等损伤程度的患者疗效最明显，损伤较重的患者也能对系统产生很大的兴趣，治疗师对开发的系统也给予了很大的肯定。