高维低秩矩阵填充问题相关算法及应用研究

来源 :上海交通大学 | 被引量 : 0次 | 上传用户:ivltuk70972
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
矩阵填充的目标是利用矩阵中少量的已知元素准确地恢复出其它未知的元素,在推荐系统、计算机视觉等领域都有着非常普遍且重要的应用。随着数据规模的增大,许多经典的矩阵填充算法已经无法适应于大数据时代的高维矩阵填充问题,因此迫切地需要更加高效以及能够进行分布式计算的矩阵填充算法。一方面可以对经典的算法进行改进,以使其具有更高的效率,从而能够处理规模更大的矩阵。另一方面可以寻求能够将大数据问题划分为多个小的子问题的方法,从而使得经典的算法可以直接用于求解这些子问题,最终再合并得到原问题的解。本文分别从这两个角度进行深入研究,提出能够高效地求解高维矩阵填充问题的算法。利用求解主成分分析的期望最大化方法,本文在经典的奇异值投影算法的基础上提出一种更加高效的矩阵填充算法。期望最大化算法使用一种交替下降的优化方法求解矩阵的主成分空间,从而避免了耗时的奇异值分解,同时也可以较容易地实现并行计算。利用矩阵填充问题中矩阵稀疏加低秩的结构特点,期望最大化算法的时间复杂度与矩阵中的已知元素的个数呈线性关系。另外,经典的奇异值投影算法需要指定矩阵的秩,本文提出一种改进的奇异值边缘分布算法,该方法能够有效地从很少的已知元素恢复出矩阵的秩。上述改进策略显著地提升了经典的奇异值投影算法的性能,从而可以更好地适应于高维的矩阵填充问题。在大部分的真实数据中,已知元素在矩阵中的位置是不均匀分布的,但是大部分的矩阵填充算法却建立在元素均匀分布的假设之上。帕累托原理指出,少部分的因素决定了大部分的结果。本文受到这一原理的启发,使用矩阵中最重要的一些行和列的因子近似代表整个矩阵的行和列的因子,从而提出一种分布式的矩阵填充算法。该算法首先从原始矩阵中选择一个最重要的子矩阵,然后使用经典的矩阵填充算法求解该子矩阵,最后利用子矩阵的解得到原矩阵的解。本文根据自然语言处理中的词频-逆文档频率概念,提出一种用于衡量矩阵行和列的重要性的方法。使用该方法选择出的子矩阵能够非常准确地保留原矩阵的特征,从而有效地解决了矩阵中元素分布不均匀的问题。另外,由于该算法的分治特点,使得其可以高效地用于求解高维矩阵填充问题。最后,本文将上面提到的分布式矩阵填充算法应用于视频背景建模问题中,提出一种基于矩阵填充的背景建模方法。该方法首先利用背景总是最经常被观测到的假设,将视频图像中可能为前景物体的像素点进行删除,从而得到一个包含缺失像素的图像序列。然后使用分布式的矩阵填充算法对去除前景物体之后的图像进行填充,从而完成背景的重建。在填充步骤中,本文针对背景建模问题的特点提出一种衡量像素和图像重要性的方法,通过这些最重要的像素和图像可以更加准确地恢复视频的背景。从大量实验中可以得出,本文提出的背景建模算法能够有效地处理各种极端情况下的视频场景。此外,该算法的效率很高,非常适合于处理高分辨率的视频背景建模问题。
其他文献
百年梦断几萦肠,不思量,岂能忘。闭关锁国,膏血啖豺狼。戊戌辛亥终有恨,民屈辱,国濒殇。
两种毒饵控制旅客列车鼠害效果观察长春铁路卫生防疫站(邮编:130051)白玉起,王媛彬,吕巍多年来,我们采用急性杀鼠剂磷化锌杀灭列车害鼠,但效果不够理想,灭后鼠密度迅速回升。为巩固灭鼠成果
7月2日,百年世博中国名茶金奖、金骆驼奖获奖品牌揭晓,我省湄潭犁芽、雷山银球茶、凤冈锌硒茶、遵义红4个公共品牌入选百年世博中国名茶金奖,
教育大计,教师为先。关注教师专业发展、重视师资队伍建设长久以来都是党和国家教育政策的重心和关键。教师专业发展并非一个不证自明的命题,从教师的专职化到教师的专业化,
现如今,口服小剂量阿司匹林(75~150mg),在心脑血管疾病的一二级预防中,具有不可替代的作用。它已成为心脑血管疾病的基础用药,应用广泛,极易与其他药物合用。需要注意的是,长
柿,起源于中国,目前已有700多个品种,分布种植于全球各地。其中,我国拥有十分丰富的种质资源,柿子产量占世界的72%(约410万吨)。柿子主要可以分为甜柿和涩柿两大类。涩柿成熟后
2007年3月20日,中国邮政储蓄银行在北京成立。成立后的邮政储蓄银行在经营过程中必将突显一些问题。如何解决这些突出问题,使邮政储蓄银行能在激烈的竞争中站稳脚跟并发展壮
典型人物报道作为我国新闻事业的一道靓丽风景线,在我国发展的不同阶段都发挥着重要的精神引领、榜样示范作用。然而,随着新时期社会环境的变化,受众价值理念渐趋多元化,典型
<正> 现有杀蟑药主要分为两类。一类是以喷洒喷雾为主要施药方式的触杀性药物,需用器械操作,工作量大,一般环境一次处理效果不理想,蟑螂密度极易回升,如奋斗呐;另一类是以广