基于明星的视频人脸验证和聚类算法研究

来源 :哈尔滨工业大学 | 被引量 : 0次 | 上传用户:fightwang
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着互联网和移动智能设备的大量普及,在线视频业务流量也在逐年增长,成为互联网经济中重要的组成部分。其中,视频广告业务、视频推荐等应用大部分围绕用户兴趣展开。本研究依据视频中的主角明星效应,通过对视频中的明星人脸进行检测、验证和聚类等相关技术研究,以助力于围绕明星人物身份展开的,诸如基于内容的推荐与检索、电影演员表的自动确定和视频快速浏览与组织等应用技术。  相比静态图像,视频图像中的人脸特征更加复杂,通常包括角度变动、光线、表情、遮挡、低分辨率等诸多问题,这也为视频人脸聚类带来了巨大的挑战。本研究着眼于流行剧集和电影所带来的明星效应,依托项目组内的基于明星识别的视频广告推荐系统,对视频中明星人脸的验证和聚类等相关问题的理论研究进行了广泛调研,实现了系统中人脸验证和聚类等关键模块,并取得了良好效果。  具体地,论文主要工作包括视频人脸数据集的标定、验证及聚类算法研究。首先,从互联网上收集了 103 集美剧《生活大爆炸》的视频数据。以固定时间间隔抽取原始视频帧,建立原始图像集。之后利用人脸检测技术获得明星人脸,利用人脸关键点探测技术获取 5 个关键点位置信息,包括左右眼位置、鼻头位置、和两个嘴角位置,通过人工设定标准人脸作为人脸对齐的矫正基准,将探测到的人脸和标准人脸进行对齐。所有检测到的人脸将被对齐到预先设定好的标准人脸,并归一化到统一尺度(256?256)。同时,系统对给定演员列表中的明星人脸进行相同的预处理操作,从而构建出人脸验证步骤中的标准人脸比对集。在构建视频人脸数据集的过程中,提出了一种新的明星人脸验证机制,实现对检测到的人脸的自动清洗。通过设计有效的验证策略,过滤大量非主演明星的人脸图像,从而得到视频人脸数据集。对于视频人脸数据集,抽取了人脸图像的深度卷积神经网络VIPLFaceNet模型表示特征。在聚类算法方面,提出了一种结合特征空间距离和视频帧时间距离的度量方法,并将这种新的距离度量方法运用到三种视频人脸聚类算法中,包括 K 均值聚类,谱聚类和基于密度的聚类算法。通过大量实验,验证了所提出的距离度量方法的可行性和有效性。
其他文献
随着互联网的不断发展,在世界范围内掀起了一股电子商务热潮。而网上电子支付的安全性却成为其发展的主要障碍。安全电子交易协议SET(Secure Electronic Transaction)是由ViSa
本论文是结合上海银行基金托管系统的具体项目完成的。在项目实施前的调研阶段,详细了解托管系统现状利业务的开展情况,提出了一种利用组件技术构造系统的思想。以上海银行基金
随着世界上越来越多的政府部门、公司和个人依赖于计算机网络,保证网络信息安全成为十分严峻的课题。入侵检测技术作为一种主动的信息安全保障措施,引起学术界和实业界的密切关
在CT技术的应用领域中,不断提出对局部扫描的需求,因此在国家数字化医学影像设备工程技术研究中心的支持下,本文就此方向展开了深入研究。在滤波-反投影算法基础上,系统讨论了CT
由于XML(ExtensibleMarkupLanguage)在网络上的广泛应用,它已经成为Internet上新的数据交换标准,同时也为数据库科研工作者带来了新的挑战。随着XML数据规模急剧膨胀,查询处理日
在全球教育信息化进程中,网络教育和流媒体技术在教育领域的应用广受瞩目。网络教学以其丰富的信息资源、友好的交互性能以及优良的开放性等特点而越来越受到人们的青睐并逐渐
WAP (Wireless Application Protocol)即无线应用协议之意,它是为目前世界上最为活跃的两项技术---移动通信和Internet 的结合而产生的一门新技术,是为解决移动设备接入因特
最近的十年,计算机网络得到飞速的发展,随之网络服务(WEB SERVICE)也有了长足的进步。很多服务都是由存储在数据库中的数据所驱动的网站,这些构成了各种各样的WEB数据库应用。其
本文重点研究了岩芯图像的预处理、目标提取和孔缝参数计算.通过实验分析,研究开发出针对火成岩和碳酸盐岩岩芯图像效果较好的图像处理、分析方法,研究结果表明这种岩芯图像
学位