【摘 要】
:
随着图数据规模的不断增长,使用外存处理的图处理系统因其低成本、易扩展等优点已经成为替代分布式内存模式图处理系统的流行方案,但外存I/O成为了系统的性能瓶颈。当处理大
论文部分内容阅读
随着图数据规模的不断增长,使用外存处理的图处理系统因其低成本、易扩展等优点已经成为替代分布式内存模式图处理系统的流行方案,但外存I/O成为了系统的性能瓶颈。当处理大规模图数据集而需要高I/O吞吐量时,使用多外存设备成为自然而常用的解决方案。但目前使用外存处理的图处理系统采取的多外存I/O管理方法存在顺序带宽利用不足、并行I/O能力受限和管理开销较大等问题,使得多外存I/O性能没有充分发挥,限制了系统最优性能的实现。为了解决上述问题,合理使用多外存设备,分析外存图处理在优化外存I/O性能时追求的外存顺序化访问和I/O高效性之间的矛盾,选择以顺序化外存I/O为更高优先级的优化原则,并支持以图分区为粒度的可选调度的折中优化方案;分析这种优化方案下的图数据访问特征,提出匹配顺序大I/O特征的粗粒度条带化方法以实现图数据在多盘的均衡分布,提高I/O吞吐量;提出基于多盘多队列的I/O管理策略,在应用层实现I/O请求的地址映射、分解、预取合并和分派等I/O管理工作,并绑定应用I/O线程专用于外存设备,进一步提高I/O吞吐量和充分发挥多外存设备并行能力;设计实现了基于粗粒度多外存I/O管理的图处理系统CSMqGraph。选取不同图算法、不同图数据集,开展了不同数量外存设备情况下CSMqGraph和GridGraph的性能对比测试。结果显示,所有情况下CSMqGraph相比GridGraph性能均有提升,系统加速比为1.04~1.40倍,且随外存设备数量的增加,CSMqGraph的加速比大致呈上升趋势。测试对比了CSMqGraph和GridGraph的I/O吞吐量和设备I/O次数,证明了粗粒度多外存I/O管理策略有效减少了设备I/O次数和提高了I/O吞吐量,进而提升系统性能,有效性得到了充分验证。
其他文献
"五四"以来,以女性视角对父亲形象的书写是一个重要的主题。通过对20世纪30年代女性作家笔下多样化的父亲形象的分类分析,认识文学形象与时代背景、文学思潮之间的关系流变,寻
根据喷涂机器人的工作要求,采用改进的D-H法建立其运动学方程,并分析其正问题。利用Solidworks软件建立机器人几何模型,通过ADAMS仿真软件对虚拟样机进行运动学仿真分析;利用
在福建省税务学会第三届理事会第二次全体会议结束时的讲话□余长继各位理事:我们的会议开得很好,可以毫不夸张地说取得圆满成功,主要标志:第一,审议通过了两年来的工作报告和今后
2008年5月20日,国家档案局、国家发展和改革委员会联合下发了《国家电子政务工程建设项目档案管理暂行办法》,本刊特予刊载。
On May 20, 2008, the State Archives Bureau
从生活中发现商机2003年5月,谢美嫒拿出她和丈夫积攒下的2万多元钱,在广州开了一家名为“圆缘园情侣私房衣馆”的精品服装店(地址:511495广州市天河南路电话:020-88490145),主
目的观察疏血通注射液联合壮腰健肾丸治疗老年性2型糖尿病性膀胱的临床疗效和安全性。方法60例糖尿病性膀胱患者随机分为观察组和对照组,每组各30例。观察组用疏血通注射液缓
2011年8月以来,墨西哥国家石油公司对其陆地和海洋9个油田勘探开发服务项目先后进行公开国际招标并签订合同,合同规定业主将油田移交给承包商管理2030年,承包商变成作业者,承
热休克蛋白是生物体在应激条件下产生的一组应激蛋白,具有维持细胞自身稳定等多种生理功能,与胚胎的正常发育及畸形发生关系密切.在一定的应激强度范围内,热休克蛋白可以保护
本文通过对《孟子集注》注音的探源与分析发现,善格物致知的理学大师朱熹对前人的注音成果并非全盘照搬,在以《孟子音义》为蓝本的基础上,广采众说,对于《群经音辨》《孟子张氏音
主题学习单元教学设计强调以主题、问题及任务活动为设计核心,学习过程中重视学生的主动参与性。在分析传统《教育学》课程中“教学”内容在授课中主要存在问题的基础上,笔者将