【摘 要】
:
非凸优化问题被广泛应用于在深度学习、仿真和金融分析与预测等领域。非线性最小二乘问题、二次规划问题、秩极小化问题、深度学习中的复杂损失函数极小化问题等都是非凸优化问题。本文基于DC(difference of convex functions,简称DC)框架重点研究了非凸优化中两类重要问题——二次指派问题(Quadratic Assignment Problem,简称QAP)和稀疏Envelope估
论文部分内容阅读
非凸优化问题被广泛应用于在深度学习、仿真和金融分析与预测等领域。非线性最小二乘问题、二次规划问题、秩极小化问题、深度学习中的复杂损失函数极小化问题等都是非凸优化问题。本文基于DC(difference of convex functions,简称DC)框架重点研究了非凸优化中两类重要问题——二次指派问题(Quadratic Assignment Problem,简称QAP)和稀疏Envelope估计问题。然而,非凸优化问题直接求解难度很大,很多都是NP难的问题。因此,本文利用DC凸松弛技术和邻近点算法思想,将上述两种不易求解的非凸优化问题转化为凸的松弛问题,并根据QAP与稀疏Envelope模型的数学特性及结构特征分别提出了针对各自松弛问题的高效求解算法。首先,本文研究了选址理论中的经典数学模型——二次指派问题,该问题旨在构建出将9)座设施分置在9)个地点上的数学模型,以期达到关于设施之间的流和地点之间的距离的二次函数的目标值最小的目标,其在芯片设计、设备制造、计算机图形与视觉领域都有重要应用。本文提出了一种新的带秩约束的双非负锥模型,并证明其与原QAP问题的等价性。虽然带秩约束的双非负锥问题模型是NP难的,但本文通过构造DC规划松弛模型,设计了一种可求解可行稳定点的半邻近DC算法(DC Algorithm,DCA),并利用SDPNAL+软件包运用改进的半光滑Newton-CG增广拉格朗日方法来求解DCA子问题。运用该算法计算了QAPLIB数据库的大量算例,数值实验结果显示所提出算法能有效地找到大部分QAP问题的全局最优整数解。其次,本文研究了DC方法在一类回归问题中的应用。在金融分析中很多实际统计问题的维数十分巨大,为了减少回归模型的冗余性,提高估计的效率,Cook等[1]提出稀疏Envelope模型。利用稀疏Envelope模型目标函数的结构特点,本文基于DC规划的框架,给出了稀疏Envelope问题目标函数的DC分解形式,基于松弛模型的凸函数梯度的Lipschitz性质,本文提出了加速邻近梯度的DC算法,并进行了数值实验。通过随机生成服从正态分布的样本和坐标矩阵的稀疏Envelope模型算例,数值实验结果表明本文提出的算法比用于求解此类问题的块坐标下降法(block coordinate descent,BCD)[2]更有效。通过对上述两类非凸优化问题在模型和算法设计上的研究表明:若构造了合适的凸松弛问题后,DC方法可以有效、快速地求解二次指派问题和稀疏Envelope估计问题。
其他文献
受Gabor分析中Ron-Shen对偶原则及Wexler-Raz双正交关系的启发,2004年,Casazza,Kutyniok与Lemmers首次在一般Hilbert空间中引入了R-对偶的概念.到目前为止,R-对偶的研究已远远超出Gabor分析的范围,在数学上有其独立的意义,已成为抽象空间标架理论的一个重要研究方向.另一方面,过去三十余年,直线上的小波与Gabor标架的研究已取得丰硕的成果,而半直
食品安全一直是社会各界关注的热点问题,而细菌性感染则成为导致食物中毒事件发生的关键因素之一,因此挖掘安全高效的食品抗菌剂具有重要意义和应用价值。甘露糖赤藓糖醇脂(Mannosylerythritol lipid-A,MEL-A)是一种天然的新型糖脂类表面活性剂,具有多种理化特性和生物活性,但其对食源性致病细菌如革兰氏阳性菌的抗菌活性鲜有报道,极大限制其在食品微生物安全领域的应用发展。本学位论文以常
胰腺癌(pancreatic cancer,PC)是一种恶性程度极高的消化道肿瘤,在恶性肿瘤引起的死亡率中排名为第七,其发病率呈现逐年上升趋势。直至目前,患者的5年生存率仍然达不到30%,所以展开胰腺癌的形成和进展机制研究极为重要。TSPAN1(Tetraspanins 1)属于四跨膜区域超蛋白家族(transmembrane4-superfamily,TM4SF)的一员,研究发现TSPAN1在胰
深度学习(Deep Learning,DL)基于多层网络结构来提取数据中的层次化特征,可使计算机通过简单概念构建复杂概念。与传统的机器学习不同,DL可在数据中抽取有效的特征表示,获得较高的处理性能,因此,它在多个领域获得了广泛的应用。深度信念网络(Deep belief network,DBN)受人脑认知推理过程启发产生,是迄今为止DL应用最为成功的深度模型之一,它由若干个受限玻尔兹曼机(Rest
发展安全、高效的锂离子电池是解决我国环境和能源危机的重要途径,也是实现电能资源合理配置和产业升级的必由之路。MoS2等过渡金属硫族化合物(TMCs)通常具有转换-赝电容协同嵌锂(吸附)机制,且片状结构能够缓冲充放电过程中的体积变化,是一类优良的锂离子电池负极材料,但循环稳定性差是其现阶段亟待解决的首要问题。一般认为,导电性差和体积膨胀率高导致了循环寿命问题。由于MoS2的失效机制缺乏更加系统的研究
煤在低温氧化过程中,一旦脱水升温会加速,甚至发生自燃,但是水份在其中的影响作用机理尚不清晰,因此研究水份在此过程中的影响作用机理对煤自燃灾害预测预报和防治都具有重要意义。通过干燥称重和工业分析测试了煤中水份,分析了其主要影响因素。煤中外水和部分可室温干燥脱除内水是自由水,其余室温干燥不可脱除水是结合水。自由水含量受煤的性质、外部环境、开采技术条件等因素影响,其他条件相同时,与表面裂隙占比正相关。常
可见光氧化还原催化反应和有机电化学催化合成反应均通过单电子转移过程产生活性自由基或自由基离子,光化学催化以“光子”作为反应试剂,有机电化学催化以“电子”作为清洁的试剂。由于相似的活化方式,许多在光化学催化条件下实现的化学转化在电化学条件下也可以实现,反之亦然。然而,光化学催化合成和有机电化学催化合成方法经常被认为是一种竞争的策略。光电化学结合的催化合成策略在化学转化中的独特优势,通过一系列具有实例
超分子自组装化学是一门快速发展的交叉学科,它涵盖了化学、生物学、物理学等特征,并且已经逐渐发展到新的科学领域。在本文中,我们科学的设计合成了十种同功能性有机配体,通过运用配位驱动自组装的思想和金属组装子导向可编程自组装的方法,报道合成了一系列基于功能性配体的超分子配合物,这些功能化的金属有机超分子化合物在光功能材料、催化等方面有着潜在的应用。在第二章中,我们设计合成了两种新颖的蒽基双(β-二酮)配
人工神经网络是模拟人脑信息处理过程的智能计算系统,因具有自我学习和良好的非线性逼近能力,在非线性系统建模中得到广泛的应用。但在实际应用中,很多实际过程是复杂的非线性动态过程,具有复杂性、非线性、不确定性、时变性等特征,单一神经网络存在灾难性遗忘问题,无法有效学习所有样本等问题,因此非线性动态系统的建模和预测是神经网络模究的难点和热点之一。模块化神经网络是基于大脑的“模块化”特征设计的,可以有效提高
模型平均是近年来统计学研究的热点话题,它主要利用一定的权重将来自不同模型的估计或预测组合起来.通过选取适当的权重,可以有效地提高估计或预测的精度.模型平均主要分为贝叶斯模型平均(Bayesian model averaging,BMA)和频率模型平均(Frequentist model averaging,FMA)两类.由于BMA需要确定各模型的先验概率,因此,越来越多的学者关注FMA.对FMA的