基于单机多核系统的图处理研究

来源 :湖南大学 | 被引量 : 0次 | 上传用户:xhl8727050
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
随着各种类型的社交网络的兴起,基于图结构数据的企业级应用正变得日益广泛与重要。而如何高效便捷的分析、调试和处理这些与日俱增的大规模图数据成为当前高性能计算领域的研究人员所面临的最迫切的问题之一。目前,已经存在一些解决方案,但是这些解决方案还存在着一定的问题。例如,分布式解决方案中存在着负载均衡、通信延迟以及经济成本高的问题,而单机系统的解决方案则存在着并发度低,容错性差等问题。针对这些问题,本文从兼容性、容错性与便捷高效的角度考虑,提出了基于并行BSP(Bulk Synchronous Parallel,整体同步并行)模型的单机图处理系统GPSA(a Graph Processing System with Actors,基于Actor的图处理系统)。首先,GPSA使用Actor的并发模型改善系统的并发性和计算吞吐量。Actor模型不仅充分的利用多核的优势,同时避免频繁的上下文的切换所带来的性能损耗。其次,改进传统的BSP计算模型。基于BSP模型的图处理过程主要有计算和消息分发两个步骤。在传统的BSP模型中,由于图数据的局部性问题,在以顶点为中心的实现方式中单个顶点上的计算和通信两个步骤需要顺序执行。GPSA结合Actor与BSP模型将图计算中顶点的计算和消息通信过程解耦,降低两个相邻的超级步之间的依赖关系,使计算和通信两个步骤并发执行,提升计算效率。最后,在I/O优化方面,GPSA将图数据分为两个部分:顶点状态信息数据和边结构数据。其中,对于顶点的状态信息数据,GPSA利用内存映射将其映射到内存,从而提高数据的读取和更新能力。而边结构数据则保存在磁盘上顺序访问。实验证明,GPSA不仅能够显著提升单机系统上图处理的性能,同时还具有较好的容错性和灵活性。
其他文献
意识形态建设历来是我们党和国家高度重视和不断推进的工作,意识形态领域的巩固和加强不仅是意识形态建设的题中应有之义,而且是涉及党的前途命运和国家长治久安的生命线。作为马克思主义政党的中国共产党始终坚持从辩证唯物主义和历史唯物主义的世界观出发,扎根中国具体实际,继承中国优秀传统文化和吸收人类社会发展文明成果,在实践创新和时代条件的变化中不断丰富和发展意识形态。主流意识形态引领力建设在我国革命、建设、改
目前,以捷联惯性导航系统(SINS)与全球卫星导航系统(GNSS)为基础的组合导航技术在自主车导航领域得到了广泛应用。但高精度SINS价格昂贵,不适合商业化应用。微机电(MEMS)惯性
近年来,随着经济的发展和社会的进步,移动互联网和语音通讯技术相继成为了人们生活中必不可少的要素,人们更关注工作效率和生活质量的提高,语音对讲以其灵活、方便、快捷的信
第一部分根尖牙乳头干细胞的分离、培养与鉴定以及三碘甲腺原氨酸最佳刺激浓度筛选目的:分离、培养并鉴定根尖牙乳头干细胞(stem cell from apical papilla,SCAPs),制备三碘甲腺原氨酸(T3)条件培养基并筛选最佳刺激浓度。方法:收集根尖未闭合离体恒磨牙,通过酶消化法与组织块贴壁法结合运用,培养原代根尖牙乳头干细胞,传代至p3至p5后用于后续的实验。诱导多向分化实验验证其分化
电动汽车因具有低碳节能、清洁环保等优点,以每年50%的速度增长,预计到2030年,电动汽车将占比汽车总量的50%,一方面由于电动汽车在城际间单次出行距离长、充电次数频繁,用户普遍存在里程焦虑心理,另一方面城际高速路网光储充电站的规划及运营尚处于起步阶段。通过研究电动汽车出行特性,制定光储充电站的定容运行策略,提升电动汽车用户出行的出行体验,协同规划光储充电站内的充电设施,兼顾双方利益,具有重要的理
图像自动标注技术在图像检索领域发挥着越来越重要的作用,逐渐成为计算机视觉的研究热点。数字可视化技术的进步和发展使得大量的图像可以在网络上获取,用户可以根据自己的喜
物流业经过60多年发展,已迈向一体化发展阶段,越来越受到政府和社会各行业重视,也吸引了众多优秀企业参与市场竞争,抢占第三利润源。传统物流企业面对激烈的市场竞争,如何增强自身竞争力,求得生存和发展是它们亟待解决的问题,选择正确的企业战略,制定清晰的发展目标和目标实施路径,对企业至关重要。本文针对J物流公司战略选择进行研究。J物流公司隶属国家粮食和物资储备系统,在保定市满城区、石家庄市区及鹿泉区、武安
进入21世纪,不用多花钱,让孩子就近上一个满意的幼儿园,是不少家庭的“小目标”。十九大报告中也首次增加了“幼有所育”一词。“幼有所育”的美好愿望,意味着重视教育,抓教
航天器在进行大角度姿态机动过程中,姿态控制系统呈强耦合、非线性的特点。在此情况下,为实现最短时间机动控制,将现有的线性最优控制方法直接应用于航天器非线性姿态控制系
中国共产党经过长期努力与不断积累,带领中国人民进入中国特色社会主义新时代。在新的发展方位下,不平衡、不充分的社会发展现状与人民对幸福生活的追求不能相适应,使得人民对幸福的诉求呈现出多元化、多梯度的特点。为解决人民对幸福多层次的需要,以习近平为代表的中国共产党人始终以马克思主义为指导,坚持全心全意为人民服务,把实现人民幸福作为自己毕生的奋斗目标。在新时代背景下,对“中国共产党的幸福观”进行理论源泉的