核外环境下高效图计算方法与编程模型研究

来源 :华中科技大学 | 被引量 : 0次 | 上传用户:ycboyyb
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
大规模图计算是大数据处理领域中的一个重要分支。核外环境下的大规模图计算系统为用户提供了一个方便的图计算环境,然而现有的图计算系统提供的编程接口受限于底层的处理模型,不能满足用户的需求。有的处理模型提供的编程接口只能实现有限的图计算应用,有的处理模型执行性能较差。同时,现有的图计算编程接口大多都是面向点或边的细粒度接口,无法描述需要使用多个算法的复杂图计算应用的流程。核外环境下的高效图计算方法与编程模型在底层的图计算引擎中同时使用了以点为中心的处理模型和Scatter-Gather处理模型,这两种处理模型一起支撑了细粒度的混合算法实现接口。高效的图计算方法与编程模型还包括粗粒度的任务封装接口,将图算法和待计算的图数据封装成任务,通过一个个任务组织复杂图计算应用的流程。细粒度的算法实现接口和粗粒度的任务封装接口为用户提供了易用的图计算应用编程接口。此外,为了优化需要多轮迭代才能收敛的图计算应用,高效的图计算方法使用了数据精简机制,为未收敛的点和边新建图数据,减少后续计算的数据量,从而实现后续计算过程中的访存优化。在核外环境下实现的高效图计算方法与编程模型相比于使用单一处理模型的核外图计算系统能够实现更多的图计算应用,并且性能优于使用相同处理模型的核外图计算系统。在处理特定的图计算应用时,交替使用两种处理模型相比于只使用单一处理模型,能够实现更好的性能。使用粗粒度的任务封装接口和数据精简机制实现的复杂图计算应用在性能上优于现有核外图计算系统中实现的复杂图计算应用。
其他文献
实施乡村振兴战略,是党的十九大作出的重大决策部署。田园综合体是实施乡村振兴战略的一种有效载体,加强对田园综合体发展的研究对整合农村资源、促进农业产业结构转型、缩小城乡差距、缓解城乡发展不平衡的矛盾、实现我国传统农业向现代农业跨越及农村经济、生态可持续发展、绿色发展具有重要理论意义和现实意义。乡镇政府是推动乡村振兴发展的主导力量,发挥着配置资源的主要作用。文章以乡村振兴战略为指导,以丹江口市土关垭镇
社区发现问题一直以来都是数据挖掘领域非常热门的研究方向,并且普遍应用于社会网络分析。然而,现有的大部分研究都是直接对单层次网络进行图切割或层次聚类,忽略了社会网络
乡村社会是我国社会发展的“稳定器”和“蓄水池”,对国家城镇化、工业化、现代化等发展具有重大意义。而乡村治理作为促进乡村社会发展的基础和关键,有着更加重要的战略意义。完善的乡村治理体系是促进乡村社会不断进步的必由之路,也是实现国家治理体系和治理能力现代化的关键一环。只有健全的乡村治理体系,才能不断推进乡村治理的创新和转型,大大提升我国乡村治理能力,从而有利于满足国家治理的现实要求,更有利于切实维护人
随着移动互联网的不断发展,O2O在线外卖模式应运而生,消费者的消费观念和消费方式也随之改变。以往传统餐饮行业顾客与服务人员的面对面接触减少,而在线外卖服务从线上平台下单到订单的配送以及线上点评互动都离不开与物流服务有形和无形的接触。物流服务质量成为影响顾客的感知及体验的关键因素,也是引发消费者再使用意愿的核心所在。因此本文试图探讨O2O在线外卖物流服务接触点的组成部分,以及物流服务接触与消费者感知
准东煤是优质的动力用煤,但其Na含量较高,常引发严重的结渣问题。结渣极大地降低了换热管的给热系数,进而影响锅炉的正常运行。控制结渣已成为当今的热点问题。因此,通过渣体的力学性能来研究高温下渣体的断裂情况,对解决结渣问题有一定的指导意义。首先,为了解渣体的微观结构,本文对块状渣体采用了Nano-CT扫描的方法,并用CTvox和Avizo软件进行了三维重构,分析了局部渣体的孔道结构和粒径分布。其次,为
电力线路70%的故障由可预测的绝缘故障引起的,当前国内外缺乏故障主动排除策略,论文针对电力线路绝缘水平在线检测存在的技术难题,通过检测电力线路局部放电产生的暂态行波信
我国高速公路的迅速发展,形成了以沥青路面为主的公路网,而坑槽作为沥青路面病害之一,不仅直接影响了行车安全,还降低了道路的使用寿命、浪费社会资源。目前沥青路面坑槽修补采用热补、冷补以及热再生修补等方式,但修补后的坑槽区域仍旧容易再次损伤,而重复的对坑槽区域进行维修不但增加了经济成本,而且长时间的交通关闭,直接影响了社会秩序的正常进行,所以对坑槽修补结构进行力学特性分析,为改进坑槽修补技术、提高坑槽修
当前,全球化经济持续发展,各国经济实力持续增强,各大行业的竞争也日渐加剧,对生产型企业的长远发展造成了很大的影响。在经济蓬勃发展,金融市场持续进步的时代背景下,生产型
在难美项群的比赛中,对于一个优秀的成套来说,难度是核心,完成是保障,艺术是提升。国际体联在2013-2016周期,对全部奥运项目和非奥项目均提出了“总分并列取完成分优先”的破并法则,好的艺术表现和高难动作展示均要求以完美完成为前提条件。在2017-2020周期,对由于训练水平不足和比赛心理素质不过硬,导致出现较大失误的成套,追加了完成减1.0分的判罚。高难度动作不再是体操类项目制胜的唯一因素,有完
图作为一种复杂的数据结构通常用来对现实世界中的问题进行建模,随着大数据时代的到来,现实世界图的规模迅速增长并超过普通单台计算机的内存容量。为了能够在有限的内存中对