对抗生成网络表情生成研究

来源 :电子科技大学 | 被引量 : 1次 | 上传用户:lmh860628
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
脸部表情生成技术持续的研究,在图形、视频、动画方面取得了长久的进步。人的脸部特征提供了大量丰富的信息,是身份识别与情感表达的重要关注部分。在实际生活中脸部表情生成技术有广泛的应用,如娱乐影视制作、计算机动画合成,以及医疗美容模拟等,得益于图像变形技术的发展,以及深度神经网络模型的发展,只需要建立生成式模型就可以减少人工建模的繁杂操作,所以脸部表情生成技术有着广阔的发展前景。本文的主要工作围绕表情生成技术研究中存在难点展开,本论文的研究对表情生成的三个方面进行了改进。一是连续性的表情生成控制方法;二是支持类别间转化(不同表情)和不同类型转化(不同风格)的方法;三是图像效果评价的量化方法与生成质量的优化策略。对于传统脸部动画表情生成技术金钱人力成本高,后期修改维护困难的问题。在框架中采用类似于对抗生成网络中的CycleGAN的结构,并在其结构的不同部分加入表情参数的控制。在模型参数上设计的结构较为简单,运行速度快。生成对抗网络开创性地结合生成式网络和生成式网络进行数据生成,但生成对抗网络的生成方式限制较少,导致大量图像像素的情况下网络易失控。对于这一问题,本文设计了一种弱监督的控制的机制,且这种控制是一种连续的控制。在实验过程中,对于表情的数据库由于隐私、自发性等问题,其数据量小,而且多为实验室环境的录制的,不同的数据库之间的差异比较大的问题。我们使用openface和face++工具,制作出表情生成训练的大批量的数据库方便了后续人员的研究。同时我们给出了图像效果评价的量化方法的主客观全面评价的方式,供后续人员参考。最后本论文分析比较了多个对应表情生成框架的区别,本论文的框架在连续控制,跨域转换上有优势。在FFHQ、Oulu-CASIA和Danbooru2018数据库上进行实验,在主观客观的指标上,验证了框架的有效性。
其他文献
脑科学作为研究大脑结构、心理现象及规律的科学,其产生与发展对教育领域具有重要影响。当前国内关于脑科学与教育的研究停留于理论解读与国外经验的本土化移植阶段,相对缺乏与具体学科结合的研究,将脑科学应用于小学科学课堂教学的研究有待完善。本研究围绕基于脑科学的小学科学课堂教学,通过文献分析法、调查法、访谈法从理论到实践展开具体研究,试图解决三个主要问题:脑科学是否对教育、小学科学教学起到理论关照作用?当前
通常认为教材循环是有百利而无一弊的,社会呼声也很高。教科书的循环是否可行,一直以来备受关注。有国家相关的宏观政策,再根据教科书循环利用的基本原则和本质,通过借鉴发达国家
在量块检定规程(试行)JJG146-94(以下简称为规程)的实施过程中,我们发现某些检定项目和要求难以进行和实施,如量块的长度稳定度考核。长度稳定度为规程规定的使用中的量块5个必
《一树丁香》把高校知识分子放在特定的环境中,放在学术界的权力关系网中,利用对学术界“潜规则”的深入剖析刻画了个性鲜明的人物形象,并赋予了其特定的文化内涵,如“皎皎者
建设以人为本的和谐校园是当今中国各大高校的主流意识和发展趋势,而大学生的诚实守信则是构建和谐校园的重要基础。本文通过分析大学生诚信品格形成的原因,反思现行高校诚信
"小组互动,六步达标"教学模式在课堂教学中能够提高学生学习数学的兴趣,减少学困生的人数,培养学生的综合素质,改善师生关系。它主要包括以下六个环节:预习反馈、目标展示、分组
史蒂芬·霍金克服了残废之患而成为国际物理界的超新星。他不能写,甚至口齿不清,但他超越了相对论量子力学,大爆炸等理论而迈入创造宇宙的"几何之舞"。尽管他那么无助地
燃气-蒸汽联合循环发电技术在我国已有一定基础,如何进一步开拓,发展国产化燃气-蒸汽联循环机组,向大容量,高参数,多品种方向发展,笔者根据国内外现行大量资料。进行综合评价,并提出积
大学生思想政治教育是一项长期性的工作,如何衡量把握该项工作开展的好坏,需要通过一定的手段考评,从而得出科学合理的结论。文章结合工作实际,就考评大学生思想政治教育工作
抢险救援车是一类在野外工作条件下,应对自然灾害、人为灾害等突发事故的应急救援专用车辆。目前我国救援车辆以中、重型救援车为主,其体积大、机动性差,难以驶入地形狭窄且