求解L1-正则项优化问题的两种算法

来源 :河南大学 | 被引量 : 0次 | 上传用户:wendi8888
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
求解欠定线性方程组在机器学习,信号处理,压缩感知,线性逆问题以及统计推断等领域有广泛的应用.作为稀疏优化的分支,压缩感知问题可通过求解极小化1-范数正则项问题处理.这样得到的问题因其正则项的非光滑性而颇具挑战.本论文提出两种求解压缩感知问题的算法,分别用修正的共轭梯度法和交替方向法求解大规模稀疏优化问题,给出一定条件下算法收敛性定理,并通过数值试验验证算法有效性.第一部分,给出稀疏优化和压缩感知的定义,列出应用稀疏优化求解压缩感知问题的算法的最新研究进展,给出本论文研究的理论基础并列出文中所用到的一些基本概念,符号,定义.第二部分,受Nesterov的光滑化技巧启发,提出一种利用三项结构的Polak-Ribi`ere-Polyak共轭梯度法求解稀疏信号恢复中的1-范数最小二乘问题的算法.每次迭代该算法只需求解三次矩阵-向量乘积运算.算法所应用的理论基础保证了算法的全局收敛性.其次,该算法通过连续性技巧加速,数值试验表明该连续性技巧明显提高了算法的执行效率.算法的执行效果优越于同样使用Nesterov的光滑化技巧和梯度法的NESTA算法.第三部分,分别基于原始模型和对偶模型,提出两种求解包含1-范数正则项和1-范数数据拟合项优化问题的交替方向法.该算法交替地极小化原始问题和对偶问题的增广Lagrangian函数.通过使用一维收缩算子或欧氏投影,所有子问题都存在显式解.算法每次迭代仅需求解两次矩阵-向量乘积运算,从而很容易实现.最后给出一定条件下算法的全局收敛性,并讨论了算法在非负信号复原问题以及赋权值的正则项极小化问题中的应用.数值试验说明该算法优于著名的YALL1算法.最后,给出本文的总结,并提出一些值得继续探讨的方向.
其他文献
在不考虑相间相互作用的条件下,气相采用RNGk-ε(重整化群)湍流模型,油滴相采用随机轨道模型,对油气分离器一次油分内的油气两相流动进行了数值模拟,揭示了油气分离器内的流
非能动技术是随着能动技术的发展而发展的,非能动技术几乎能够在所有的工业技术中得到应哟,是当前工业技术研究的热点和重点,其中核电机组中非能动技术的应用被看做是先进核
工业锅炉水质影响着锅炉的热传递效率、燃料利用率和锅炉的安全生产,因此,对于锅炉水质的检验十分重要。本文从我国锅炉水质的常规检验方法入手,分析了锅炉水质检验的几点内
中华文化走向世界,在改革开放30多年后的今天,在中国在世界上和平崛起的时代,正在成为现实,正在成为发展中华文化、融入世界文明的重要途径和必然趋势。而要让中华文化走向世界,则
报纸
随着科学技术的发展,现代教学模式也发生了变化。结合实际教学条件,如何通过理实一体化模式把烹饪专业的教学水平提高,培养出企业需要的人才,这是值得去探究的。
在广告中,广告双关语得到了广泛的应用,它为广告增添了意想不到的语境效果。从关联理论的视角研究、分析了广告双关语,希望对相关行业的工作者有所帮助。
<正>听颖师弹琴(节选) [唐]韩愈昵昵儿女语,恩怨相尔汝。划然变轩昂,勇士赴敌场。浮云柳絮无根蒂,天地阔远随飞扬。喧啾百鸟群,忽见孤凤凰。跻攀分寸不可上,失势一落千丈强。
针对某大型火电厂高、低压厂用电动机运行中发生的定子绕组烧损、电动机轴承损坏及转子鼠笼断条故障,从历次解体检查、修复电动机的过程中不断摸索、分析和总结各类故障发生
自1987年河南大学招收高水平运动员开始,所招收的高水平运动员均进入河南大学法律系攻读法律专业,伴随着时代的不断发展,2002年到目前河南大学的高水平运动员均进入文学院“汉语言文学专业”学习。河南大学以培养具备一定的文学素养,掌握系统的汉语言文学知识并具有一定的体育特长,德智体全面发展的应用型、复合型高级人才为培养目标。2016年国务院办公厅出台了《关于强化学校体育促进学生身心健康全面发展的意见》
概述了电力设备高压试验的内容,分别为电力设备在制造厂的高压试验、电力设备在大修后的高压试验和电力设备在运行中的高压试验,介绍了3种电力设备的高压试验方法,并对电力设