【摘 要】
:
在推荐系统中,高维稀疏矩阵常用来描述用户和项目实体间的二元关系,隐特征分析方法能够对高维稀疏矩阵中缺失值进行估计,通过缺失预测达到对用户进行个性化推荐效果。随机梯度下降法是求解隐特征分析模型的有效策略,然而基于随机梯度下降算法的隐特征分析模型很大程度上依赖于超参数学习率的选择。粒子群优化算法(PSO)因其收敛快速和实现简单的优点已经被成功用于隐特征分析模型的超参数学习率的自适应调谐,但是由于标准P
论文部分内容阅读
在推荐系统中,高维稀疏矩阵常用来描述用户和项目实体间的二元关系,隐特征分析方法能够对高维稀疏矩阵中缺失值进行估计,通过缺失预测达到对用户进行个性化推荐效果。随机梯度下降法是求解隐特征分析模型的有效策略,然而基于随机梯度下降算法的隐特征分析模型很大程度上依赖于超参数学习率的选择。粒子群优化算法(PSO)因其收敛快速和实现简单的优点已经被成功用于隐特征分析模型的超参数学习率的自适应调谐,但是由于标准PSO算法容易陷入自身的局部最优解,导致最终对缺失值的预测造成精度损失。因此,本文提出两种改进粒子群优化算法的自适应隐特征分析模型来解决标准PSO算法容易快速收敛到局部最优点的缺陷,从而解决复杂且繁琐的超参数学习率调谐问题。本文主要的研究内容如下:(1)提出了一种基于Adam-PSO结合的隐特征分析模型。该模型在粒子群优化算法中估计每个粒子位置的“梯度”,通过粒子的个体位置变换和群体位置变换来估计粒子位置的“梯度”值,然后使用Adam算法更新粒子位置,以此来构建Adam-PSO结合的优化算法。该模型有效地实现了隐特征分析模型超参数学习率的自适应调谐。(2)提出一种基于广义动量-PSO结合的隐特征分析模型。该模型在粒子的进化过程,计算粒子速度的动量和“梯度”,并通过更新增量的形式来表示粒子速度的“梯度”,从而兼容了广义动量法,以此构建广义动量-PSO结合的优化算法。该模型有效地实现了隐特征分析模型的超参数学习率自适应调谐。(3)通过在工业应用产生的四个高维稀疏矩阵上进行大量实验表明,本文提出的两个改进模型在不增加计算负担的情况下实现了隐特征分析模型超参数学习率的有效自适应调谐,并且从预测精度和收敛速度两方面都展现了良好的性能。
其他文献
近年来,深受广大研究者青睐的群智能优化算法(EAs)很大程度上提高了复杂优化问题的求解,并将其用于多种领域的研究。其中,猴群算法(Monkey Algorithm,MA)对于大规模多峰优化问题的求解性能相对较高,应用前景较广。但在一些较大规模离散问题的求解上,MA还存在一些缺点,因此对MA的进一步研究,具有重要的现实意义。针对MA在大规模离散问题上的求解性能,本文主要选用折扣{0-1}背包问题(D
波动方程是描述自然界中各种波动现象的一种双曲型偏微分方程,其发展应用于各个领域,但其解析解难以求得,因此波动方程的数值求解显得越发重要。人工神经网络是能够以任意精度逼近偏微分方程的解析解,是求解波动方程数值解的一个重要工具。本文主要就人工神经网络算法求解波动方程以及该算法的改进作出如下的研究:第一章主要介绍了神经网络的背景知识及其发展的国内外现状,并简述了本文所做的工作。第二章介绍了神经元模型及单
机器人的诞生让人们的生活更加智能化。其中,具有自主移动功能的移动机器人更是当下非常热门的科技成果。路径规划是移动机器人执行各项任务的前提,它决定了移动机器人是否能够在作业区域内安全、高效地执行任务,对移动机器人的性能具有十分重要的影响。现有国内外文献对移动机器人的发展动态和路径规划均作了大量的研究,但对移动机器人从某个起点出发、经过多个目标点并避开障碍物、最终返回起点的情形研究还较少,本文选取这类
随着人工智能技术的不断发展,传统的机械臂应用变得越来越智能化,其中的一个关键智能化提升就是使机械臂获得在非结构化空间环境中对某种目标物品按某种物理属性进行快速分拣的能力。本文采用深度强化学习算法DDPG(Deep Deterministic Policy Gradient)代替在机械臂控制中的逆运动学解算方法,通过数据驱动的训练过程控制机械臂到达目标位置,从而抓取目标物体,达到分拣目标物品的目的。
智能建筑是“以建筑物为平台,兼备信息设施系统、信息化应用系统、建筑设备管理系统、公共安全系统等,集结构、系统、服务、管理及其优化组合为一体,向人们提供安全、高效、便捷、节能、环保、健康的建筑环境”。智能建筑的环境监测系统是智能建筑的重要子系统,它对建筑体内外环境提供全天候监测,为环境异常预测、节能降耗、安全管控、便捷生活等提供数据支持,有效保障建筑体及内部人群的生命财产安全,一直是现代建筑领域、信
近些年,随着通讯技术的快速发展,互联网上的内容越来越丰富,互联网已成为人们获取信息的主要途径。随着信息的指数级增长,对信息进行分类整理,减少信息检索的时间成本,提高信息资源的利用效率就显得越来越重要。文本是信息传递的重要载体,传统的文本分类模型需要人工进行特征工程,效率低下。所使用的特征提取方式具有高维度、高稀疏性的缺点。目前,基于深度学习的RNN(Rerrent Neural Network)和
脑肿瘤是威胁人类生命安全的常见肿瘤之一。传统的脑肿瘤诊断方式是医生根据病人身体的不良症状以及眼底的并发症进行判断。随着医学技术的发展,现阶段对脑肿瘤的诊断方式变为了由医生根据病人的脑部MRI图像进行判断,但这种方式随着医生日常增多的工作量以及各个医生临床经验的不同,误诊、漏诊的情况在长期的临床诊断中时有发生。计算机辅助诊断系统(CAD)可以准确识别图像,协助医生进行日常阅片工作,缓解工作压力,提高
随着人脸识别技术日渐成熟,人脸识别已广泛应用到访问控制、人脸支付和设备解锁等场景中。因此,人脸识别系统的安全性引起了越来越多的关注。人脸识别系统主要基于图像特征的提取与匹配,完成身份认证。这种认证方式容易受到欺骗攻击,如在认证系统前呈现伪造的人脸照片、视频或3D面具等,导致虚假认证。人脸活体检测通过分析摄像机捕捉的人脸信息,进而判断认证者是否为活体用户,是人脸认证系统抵御欺骗攻击的重要技术手段。目
眼底视网膜血管的不同形态(如直径、长度、分支等)具有十分重要的临床意义,可用于监测和分析各种心脑血管疾病和眼科疾病。自动分割眼底图像中的视网膜血管,可以有效帮助医生对各种心脑血管疾病和眼科疾病病人做出更全面的诊断和进一步的治疗,增加治愈的可能性。在研究过程中发现由于采集设备、拍摄角度和光照等的差异对眼底图像获取的影响,想要对眼底图像的视网膜血管进行精准分割就显得十分困难。而且现有模型存在分割过程中
汽配件喷涂是汽车零配件生产流程中重要的环节,对汽配件颜色喷涂生产问题进行优化,有助于企业进一步降低生产成本,而目前尚无文献对该类问题提出针对性的数学模型和解法,故针对汽配件喷涂生产问题提出高效的求解方法对实际生产具有理论指导意义。首先,将实际单轮汽配件喷涂生产问题转化为数学问题,考虑到每一个汽配件必须喷涂且只喷涂一次,具有旅行商问题(TSP)的基本特征,故采用借鉴TSP问题建模的方法对单轮汽配件喷