基于形变模型的人脸三维重构与表情传递的研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:feiyulaile
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
人机交互是智能机器人发展的一个重要部分,而表情信息作为一种更易接受的表达方式也是人机交互中一个主要研究领域。人脸识别作为计算机视觉的一个研究热点,面部形变传递是目前智能配音系统的一个发展方向,这个研究方向可以应用到智能配音系统中,机器人通过观测到的人物角色(目标角色)图像或视频构建其三维模型,同时观测源角色(配音者)面部变化并将其面部形变传递到目标角色中,这样机器人就可以实现源角色对目标角色的口型校准配音。更加类人化的机器人语言翻译系统中可以让机器人不仅做到语言的准确,更能实现翻译口型的准确性。  本课题构建了一种基于三维重构网格的表情传递模型,首先进行了提高大位姿及面部遮挡下人脸重构的复杂性以及简化模型的复杂性的研究,针对三种不同特征点检测算法的研究,在基于Haar-Like特征下进行人脸区域检测,并在此基础上进行了特征点检测的分析,验证算法改进的有效性。  其次,基于面部DLIB特征点完成人脸模型的重构,课题进了三种不同重构模型的研究,分析各个模型的特性,选取适合自己表情传递过程中一种简易发的重构模型。  再次,在重构网格的基础上实现表情传递,表情传递部分主要采用基于仿射变换的形变变换传递模型,采用此算法优化控制点的选择使整个形变变换在最少控制点的约束下实现基本表情传递。  最后,采用ISOMAP算法构建模型的纹理向量对模型渲染,实现更加逼真的表情传递。此模型应用于智能服务机器人中使人机交互的方式更人性化,更具趣味性,机器人也更加类人化。
其他文献
事业单位属于公益性机构,在促进社会经济发展,提供社会公共服务方面发挥重要作用.在事业单位改革的持续深化下,事业单位人力资源管理绩效激励制度的不足逐渐凸显出来,表现在
制粒机造球在整个烧结过程中是十分重要的一个环节。制粒机工艺性能的好坏是通过烧结过程中的垂直烧结速度、料层透气性以及烧结厚度等技术参数来检验的。其中,燃料二次分加结
做为汽车用板的冷轧钢板,不仅在机械性能上要满足要求,而且表面质量也是至关重要的,但是现在国内钢厂生产的汽车用钢板表面往往带有振痕。为了减小或消除振痕,以平整机为重点开展
发光材料被广泛应用于日常生活和生产中,开发低成本、环保安全、发光性能优良的发光材料具有实际应用价值。氧化锌在室温下的禁带宽度为3.37eV,具有高达60meV的激子束缚能,所以Z
参数化优化设计(Parametric and Optimum Design)是在参数化变换尺寸范围内选择一组最优数据来进行尺寸驱动(Dimension-Driven),是CAD技术在实际应用中提出的课题。利用参数化
随着信息技术的发展,信息化已经成为制造业提高竞争力的核心,PDM是继CAD之后,国家在制造业企业重点推广的一项新技术,我国的CAD,PDM等软件在应用数量上已超过国外产品,大力支持了制
统编教材通过“快乐读书吧”把整本书阅读的要求纳入了课堂,借以响应《义务教育语文课程标准》的倡导:“培养学生广泛的阅读兴趣,扩大阅读面,增加阅读量,提倡少做题、多读书
期刊
海洋环保问题是目前国际范围内广泛关注的焦点,其中海洋溢油事故是世界各国海洋应急响应面对的重要挑战,事故不仅造成资源浪费和巨大经济损失,而且对海洋环境甚至生态环境带来无
齿轮传动是一种在工业中占有举足轻重地位的一种传动方式。它的形式多样,能够适应于许多行业中。它能够传递的很大的功率,转动速度可达200m/s。它的传动比稳定,效率高,结构紧凑,工
球磨机是物料被破碎之后,再进行粉碎的关键设备,它广泛用于水泥,有色金属选矿等生产行业。球磨机是一种典型的低速大转矩类负载,目前主要采用传统的异步机+减速机的驱动模式。由