基于流式大数据的音乐推荐系统的设计与实现

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:FriedaCao
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着移动互联网的发展和智能设备的普及,各种网站、应用程序产生的数据量与日俱增,而数据的重要性也越来越高。为了能利用好这些数据,提取出用户的兴趣,挖掘出数据更深层次的价值,推荐系统应运而生。而传统的推荐算法模型,例如协同过滤、矩阵分解等算法在处理高维稀疏数据时的效果较差,泛化能力较弱,并且难以保证推荐的实时性,模型训练代价较高,无法直接运用于实际生产中。针对上述问题,基于流式大数据框架、近似近邻检索技术和因子分解机算法,设计并实现了一个音乐推荐系统。系统为用户提供了音乐信息浏览、收藏、评论、打分等业务功能,并推荐他们当前可能感兴趣的音乐。系统实现了两种不同场景的推荐功能,分别是相似内容的推荐和用户个性化的推荐。系统结合了B/S架构和流式大数据框架技术,通过Java服务端代码埋点收集用户行为数据,并使用消息队列Kafka存储用户行为数据,采用Flink等大数据框架对用户行为数据进行实时计算和传输。推荐算法中引入了自然语言处理中词向量化的思想,结合TF-IDF算法,对音乐的文本信息进行向量化,并使用Redis数据库存储音乐的向量;通过随机投影法实现了局部敏感哈希算法,应用于相似内容推荐和个性化推荐的召回阶段;最后,使用因子分解机算法对用户与音乐行为特征数据进行训练,计算出用户个性化推荐结果集,并将推荐结果推送给不同用户。音乐推荐系统具有良好的可扩展性和可维护性。系统基于随机投影法实现了局部敏感哈希算法,达到了快速的近似近邻搜索的目的;并结合流式大数据框架增强了推荐的实时性;实现了两种不同场景的推荐需求,提升了用户的体验。
其他文献
随着经济快速发展,不可避免带来资源浪费、能源枯竭等问题,进而导致全球气候变暖,极端天气时有发生,在潜移默化中影响着人类和生态环境。由此我国在联合国大会上庄严承诺“双碳”的目标。文章介绍碳会计信息披露的研究现状、披露的方式和内容,分析碳会计信息披露出现的问题,并提出解决方案,旨在提高碳会计信息披露的质量,激励企业实现可持续发展,为实现“双碳”贡献一份力量。
本文基于正向射线追踪算法和图形处理器(GPU)加速技术,讨论了用户处于不同业务模式下5G基站的天线方向性,计算出信号到预测点的传播路径,预测城市环境下的5G基站电磁辐射水平。利用Mat1ab软件仿真获得5G基站天线阵方向图,基于实际场景搭建预测的城市场景,通过基于GPU加速的正向追踪算法模型对5G基站电磁辐射进行预测。最后将预测结果与实测结果对比。
目的 评价南京市高校大学生心肺复苏术知识水平、参加培训态度、施救意愿以及实际操作能力的情况。方法 于2021年1月-5月,采用分层多阶段整群抽样从南京市高校中随机抽取8所高校,并从中抽取1600名大学生作为研究对象,对其心肺复苏术知识掌握情况、参与培训态度和施救意愿进行调查;随机抽取160名大学生参与心肺复苏现场模拟测评,分析不同性别大学生心肺复苏术操作能力。结果 大学生对“按压体位要求”的掌握情
依据我国《刑法》关于故意犯罪和过失犯罪的规定,对于主观罪过形式,应当以行为人对危害结果的态度为标准进行判断。而危害结果是对法益的侵犯所造成的后果。结合高空抛物罪在刑法分则体系中所处的位置,该罪的保护法益应当是社会公共秩序。因此,高空抛物行为的危害结果应当是对社会公共秩序的破坏所造成的结果,具体而言就是对处于高空的人不得随意抛掷物品的社会共识性规则的破坏所造成的结果。该结果属于非物质性结果,与行为同
<正>在地缘政治和疫情的双重冲击下,全球半导体芯片产业将迎来结构性调整时期,这也是运营商进军芯片产业尤其是物联网芯片产业的重要机遇期。关于物联网芯片物联网芯片是指物联网产业链中用到的芯片,物联网产业链主要包括感知层、网络层、平台层和应用层。运营商在物联网产业链中是负责网络传输的管道商,若想做大做强物联网营收,不能只盯着流量收入,而应该向上游迈进,帮助物联网客户同时做芯片硬件和网络服务,提供全套解决
期刊
传统的航行路线推荐方法依据人工势场推荐航行线路,因计算量大,导致推荐反应慢、推荐路线距离长的问题。针对传统方法存在的问题,研究大数据分析的船舶航行线路智能推荐方法。将航行海图抽象并分解后,利用大数据建立航行环境模型。根据协同过滤算法原理,实现航行线路的智能推荐。实验研究表明,提出的线路推荐方法的平均反应时间为2.97 s,并且推荐航行线路更短,有效节省航行时间,保护航行安全。
为应对日益严重的人口老龄化形势,中国老龄化政策的价值取向逐渐从“消极老龄化”转向“积极老龄化”,实践方向也从关注老年人身心健康向开发老年人力资本迈进,这为老年教育发展提供了契机。近年来老年教育有逐渐转为线上与线下相结合的趋势,开放大学举办的老年大学作为一种新型的老年大学,受到社会的广泛认可并快速发展。但这类新型的老年大学在办学定位、领导机制、师资队伍、教学管理等实践层面存在诸多问题,缺乏统一的指导
<正>随着基础教育课程改革进入"核心素养时代",关于高中历史课堂教学学科素养的研究和讨论如火如荼地进行着,对于核心素养的概念已经比较明确,即"学生在接受某一学科教育过程中,以学科知识技能为基础,整合了情感、态度或价值观在内的,逐步形成的适应个人终身发展和社会发展需要的正确的价值观念、必备品格和关键能力"[1]。目前讨论高中历史学科核心素养著作与文章很多,但是关于初中历史教学核心素养培养的文章却寥寥
期刊
<正>2014年至2018年,笔者有幸参加了西宁市历史教研员贾生石老师主持的全国教育科学“十二五”规划课题“中学历史基于师生双主教学相长基础上的教学方法工具、模式发掘与利用研究”。在课题研究中,笔者与课题组老师尝试了多种跨学科、具象化的教学模式以提高中学生在历史课堂上的参与度,促进教师课堂角色的转变,提升课堂教学效率,其中包括跨学科图示、创新型思维导图、微课等形式。下面,笔者就以“俄国1861年改
期刊