随着信息技术的不断发展,人类之间的交流变得日益密切。语言交流是人类沟通的主要方式,并且在人类的经济、文化和工作等方面都起到了重要的作用。然而,迄今为止,“语言障碍”仍然是人类日常交流中遇到的主要问题。“语言障碍”通常包括:第一,由于地域、文化的差异造成的语言交流障碍。第二,由于发音器官受损伤造成的语言障碍。传统的语音合成系统更多关注于语音信号的处理。然而,研究人员更需要一套能够对发音运动过程进行“可视化”数据分析的框架。基于此,研究人员关注于发音运动合成系统的研究。根据定义,发音运动合成系统是通过机械、电子的手段复现发音运动的技术。到目前为止,用于此系统的技术包括:超声图像和磁共振图像处理技术。超声波具有较好的方向性和穿透性,它常被应用于人体器官的扫描。但是,超声图像具有低对比度、清晰度差和强像素干扰的缺点。与之相比,磁共振图像清晰度高,成像完整。但是,其难以获得实时图像。这2种技术都单独有自己的发音运动合成系统。但是,由于他们的缺点,使其难以充分在运动的可视化研究中发挥作用。为解决此问题,本课题提出基于超声与磁共振图像的发音运动合成系统。本课题结合超声图像与磁共振图像的优点。本系统利用超声波采集器实时采集发音部位的关节节点的位置变化信息。同时利用自动化的方式建立磁共振图像库。然后,将超声图像实时与图像库中的数据集相映射。最终,结果以动态方式反馈。本课题的创新点在于提出一种方法能够实时映射两种不同类型的断层图像。映射的正确率的前提是:第一,本课题能够精确地从断层图像中提取出完整的舌体表面上轮廓线。第二,磁共振图像库的自动化建立方式。本课题的设计实现为研究发音运动合成问题提供了可视化的方法。