基于HDFS的动态负载均衡方法研究

来源 :信息与电脑 | 被引量 : 0次 | 上传用户:a5b4123
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
城市监控视频数量呈现出爆炸式增长,为应对快速增长的存储压力,Hadoop分布式文件系统(HDFS)已被许多视频服务网站广泛使用,但其负载平衡工具并未考虑视频文件在线播放的带宽消耗特性和NameNode异构性能差异.基于此,本文提出一种基于HDFS的动态负载均衡方法.此方法建立了新的负载评估模型,通过对元数据的多副本异构节点进行动态自适应备份,实现了元数据的动态分配,并保证了元数据服务器集群的性能.实验结果表明,本方法可以有效避免高带宽消耗数据块的聚集,在90%的场景中优于原有的负载均衡方法,可以将数据节点
其他文献
随着国民经济持续增长,进一步扩大了建筑规模,建筑企业经济损失逐渐增加。必须要注重工程预算审核,在预算工程造价的基础上,促使工程造价控制逐步强化,使得资金高效利用的目
期刊
输电线路所处地质条件恶劣,容易遭受冰害。介绍了一套输电线路灾情监测系统,它能对现场的图像、气象要素、山火情况、导线温度进行实时监测,并且具有使用方便,运行可靠等优点
我国加入WTO后,纺织服装出口的主要障碍是环保等技术壁垒,获得生态纺织品认证,无疑将为我国纺织服装企业进军国际市场的通行证。
[摘要]:在社会主义市场经济条件,要能够获得良好的市场效益,不仅需要有效的约束机制,同样需要良好的激励机制。要实施的分配制度改革与工资政策的调整,不仅是在现有的管理情景下进行的改革,也体现了经营者的管理智能。要知己知gk,量力而行。必须对现有的薪酬体系与组织及管理状况进行调查。  [关键词]:工资管理制度;分配制度;比较分析    工资分配制度是现代管理制度的重要组成部分。建立起符合社会主义市场经
Activity活力 以牛仔洗旧效果为主体,用自然的亮红、黄绿、玫瑰红等色彩勾勒出童装的敦实。粗纺面料也成为流行的主题。
随着视频监控技术与互联网应用的普及,视频数据挖掘已成为当前大数据领域的重要研究内容之一。在视频数据挖掘中,对视频内容的理解需要从局部动作语义理解上升到更高层的复杂场景或事件语义理解。在对视频基本动作语义概念理解的基础上,提出一种基于基本动作语义概念关联的视频复杂动作场景检测方法。该方法首先记录视频动作语义概念的出现情形,对相应视频场景中的所有动作语义概念采用Aproiri算法进行关联规则挖掘,然后
随着计算机以及互联网技术的不断普及和应用,社交网络开始出现全新的变化,人们的交流方式也开始由传统的面对面互动方式转变为网络互动模式,因此社交网络中的个性化推荐模型
针对传统大数据聚类算法中存在效果差和时间复杂度高的问题,本文提出一种基于增量随机抽样的大数据迭代优化模糊C-均值算法(Fuzzy C-Means Algorithm,FCM)算法。该算法在大数
期刊