云计算中的网络拓扑设计和Hadoop平台研究

被引量 : 0次 | 上传用户:kkk00011123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
云计算是2007年底正式提出的一个新的概念,它是一个革命性的举措,意味着计算能力也可以作为一种商品进行流通,就像煤气、水电一样,取用方便,费用低廉,不同之处只是在于它是通过互联网进行传输的。至今为止,Google、Microsoft、IBM、亚马逊等IT商业巨头都推出了自己的云计算平台,并把云计算作为其未来发展的最主要战略之一。因此,云计算的研究不但紧跟业界技术发展的趋势,同时还具有较高的应用价值。在云计算系统的后端,有成千上万的服务器,如何将如此大量的服务器有效地组织是云计算系统高效稳定运行关键问题之一。一个合理的网络拓扑不但可以提高网络的性能,而且能够保证网络的稳定性,使网络在部分节点或链路故障或拥挤时也能正常工作。云计算系统后端的网络拓扑特性有别于一般的网络拓扑,需要我们重新考虑和研究。Hadoop是一个在集群上运行大型数据库处理应用程序的开放式源代码框架。它支持通过Google的MapReduce编程范例来创建并执行的应用程序,在很多大型网站上都已经得到了应用,可以说是目前最为广泛应用的开源云计算软件平台。但其发展时间较短,研究还不够深入,还有较多值得改进的地方。考虑云计算以上两个方面,本文主要进行了以下研究:1.通过调研云计算的网络需求,分析云计算的网络拓扑结构特点,提出云计算网络拓扑结构应该由中心的主干交换部分和外围的树状子网组成的基本构想。然后利用图论和最优化理论,基于贪心算法思想,针对其主干交换网络的拓扑设计提出了自动拓扑设计算法RGA并仿真实现,通过和已有算法的比较,证明了算法的有效性和优越性。2.通过调研Hadoop的相关资料,在实验室搭建配置了8台PC组成的Hadoop平台。然后对Hadoop的MapReduce工作模式进行分析,针对它的多任务调度提出了基于优先级的加权轮询算法(PBWRR)并在Hadoop平台上编程实现。最后比较了PBWRR和Hadoop平台默认使用的FIFO调度算法,讨论了它们的优劣和各自适用的场景。最后我们对论文工作进行了总结,并讨论了对进一步工作的展望。
其他文献
采用嗜热脂肪杆菌芽胞菌片作为指示菌,通过其在同一灭菌条件下对同种包装方式的饲料、垫料、动物饮用水以及笼具等多种物品的灭菌效果以及不同灭菌条件下对单一物品的灭菌效
目的研究利美尼定胶囊在健康志愿者体内的药代动力学和相对生物利用度,验证该制剂与进口利美尼定片的生物等效性。方法采用HPLC-MS/MS法测定24例健康男性志愿者自身交叉单剂
十三五规划提出“藏粮于地、藏粮于技”战略,其根本在于保护耕地。耕地是国家粮食生产的重要前提与保障,关系着国家粮食安全与农业可持续发展。耕地地力作为衡量粮食生产力的
对2018、2019年全国31家省级党报的版面进行抽样考察后,发现大多数省报基本不设固定刊发相关稿件的版面或专栏,舆论监督功能较弱,主要原因是一些相关领导干部媒介素养不足,没
目前,国际金融危机的影响尚未平息,世界经济的复苏难以预期.钢铁行业已进入微利时代,全行业均处于需求萎缩、产能过剩、同质化竞争、盈利空间狭小的困局之中.如何解开这一困
在Web2.0网络环境下,去中心化和长尾理论所揭示的历史形成的数字参考服务中传统的服务提供者(咨询员)与服务接受者(用户)两大身份类别,面临的变化在于向相互参与的身份转变,
<正>作文教学的过程,好比铸造宝剑的工序:多读如备料,多写如铸造,修改如锤炼,反思如淬火。但一切皆以学生为主体,教师只能指导,无法替代。教师无法把自己储备的材料注入学生
城乡一体化是城乡关系发展的最高阶段,其目标是打破城乡二元经济社会结构,在城乡协调发展中实现城乡渐进融合。党的十七大报告和十七届三中全会都着重强调,推进城乡经济社会
随着当今移动通信技术的迅猛发展,移动通信的发展目标都是在更好的语音通信之外,向用户提供更加丰富多彩的高速无线数据应用。其中短消息业务作为GSM网络的一种基本业务,已得