基于通信负载均衡的社交网络图分割算法研究与实现

来源 :太原理工大学 | 被引量 : 1次 | 上传用户:laoyang2009123456
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
海量社交网络数据中蕴含着丰富的信息,图论是挖掘这些信息的重要方法之一。面对日益增多的图数据,分布式计算成为处理大规模图数据的有效手段。在分布式图计算中,通信所消耗的时间占有很大的比例,通过图分割算法的设计可以有效地降低通信量并实现负载均衡,从而提高分布式图计算的效率,典型的例子包括Metis图分割算法。但是,用现有的图分割算法处理非均衡图数据会造成各个子图之间通信量不均衡,从而影响了计算效率。为解决这一问题,本文针对社交网络图数据特点进行了深入研究,并以传统图分割模型为基础,建立了实现通信负载和存储负载双重平衡的图分割模型。以通信负载均衡图分割方法为理论依据,设计并实现了通信均衡标签交换算法(Communication Balanced Lable Exchanging method),同时为进一步减小贪婪算法模型带来的局部优化影响,本文使用模拟退火算法对CBLE算法进行深入优化。本文最后使用Hash方法,Metis方法与本文中的CBLE算法进行实验分析,分别在通信边数量,顶点规模均衡度,通信边分布均衡度指标对三个算法进行比较,CBLE算法整体具有明显优势。为更加有力证明本文算法在提升分布式图计算框架处理社交网络数据的效率方面的优势,本文最后将CBLE算法应用于Apache开源图计算框架Hama中,使用Twitter大规模社交网络数据集进行测试。其结果表明分割子图的通信负载均衡对分布式图计算框架处理社交网络数据的效率提升有一定的效果,并且随着集群资源利用率的提高,本文算法的分割结果对图计算效率有10%到15%的提升。
其他文献
随着新媒体技术的快速发展,电视媒体受到了一定的冲击。近年来,电视节目的类型有了质的变化,从此前的传播者与受众具有一定的荧屏距离到现在节目类型生活化、节目形式受众化。这样的一大转型,使得媒体人也纷纷进入了品牌化竞争的时代,节目主持也有了一定的转变。本文以湖南卫视《天天向上》为例,对我国大陆脱口秀节目主持的现状作一梳理和研究。
情感效应是指一个人的情绪状态可以影响到对某一个人今后的评价。第一次接触时主体的喜怒哀乐,对于对方关系的建立或是对于对方的评价,可以产生不可思议的差异。教育心理学中,情
本文以2017年8月8日九寨沟地震事件为背景,在梳理国内新媒体开展新闻报道动态的基础上,重点列举'机器人写稿'、新媒体'直播'、融合式报道三类创新性的报道形
小学语文课程标准要求“在发展语言能力的同时,必须发展想象力”。小学想象作文教学的目标是“激励学生写想象中的事物”。针对想象作文教学的目标,我结合多年教学经验进行了探究和尝试,认为采用如下方法,可以有效提高学生的想象力。  一、抓住小学生爱幻的天性,培养其想象力  小学生的天性是爱幻想,他们的特点是生活经历少,想象空间大,家里的、外面的东西,包括世上万物,它们可以跟自己说悄悄话,存在或不存在的东西,
摘 要:新课改的理念已经慢慢渗透到师生中,当前许多语文教育专家和理论研究者以及众多的一线教师也对语文综合性学习的各种问题做出理论与实践的探讨。  关键词:初中语文;综合性学习;方法探究  一、引言  当今社会正朝着信息化方向发展,在教育领域,人们已经不满足于当前的教育模式,这就需要教育工作者在教学过程中全面实施素质教育,跟上时代的步伐。对于教育本身来说,这是一次机遇,也是一次挑战。  在初中语文中
为推动和促进军民融合军用物资应急采购工作健康发展,在分析军用物资应急采购特点的基础上,针对军用物资应急采购工作中存在的主要问题,从法规制度、指挥协调机制、运行管理
摘 要:随着信息技术的不断发展,多媒体教学已经成为常态,课件教学也逐渐成为课堂的主要特色。但是在设计课件时,必须要有针对性,符合学科的特点。本文基于多媒体课件设计,着重分析和研究了小学数学课件设计的相关内容。  关键词:小学数学;多媒体课件;优化设计  随着计算机信息技术的发展,多媒体教学已经成为一种常态。相比较以往传统的教学方式,多媒体教学具有明显的优势:直观、形象、生动。在课堂教学过程中,教师
细节的运用是电视专题片中一个重要的因素,尤其是在人物刻画和主题表现方面,生动的细节刻画往往会起到画龙点睛的作用.任何一部优秀的电视专题片,无不充满着带有质感的细节描
关爱留守青少年公益创业项目是由赤峰学院化学化工学院"青之翼"志愿服务团队发起,面向赤峰地区留守青少年的公益创业项目.它旨在解决留守青少年的生活、学习、健康、心理情感等
植物多酚是植物体内重要的次生代谢产物,是重要的天然抗氧化剂,能够清除自由基和淬灭活性氧。Nrf2(NF-E2-related factor 2)/抗氧化反应元件(antioxidant response element,A