【摘 要】
：
针对Hadoop集群节点性能差异大、资源分配随机、执行时间过长的问题,提出一种将节点性能标签（简称节点标签）和作业类别标签（简称作业标签）进行动态匹配的调度器。节点初始分类并
论文部分内容阅读
针对Hadoop集群节点性能差异大、资源分配随机、执行时间过长的问题,提出一种将节点性能标签（简称节点标签）和作业类别标签（简称作业标签）进行动态匹配的调度器。节点初始分类并赋予原始节点标签,节点检测自身性能指标生成动态节点标签,作业根据部分运行信息进行分类并生成作业标签,资源调度器将节点资源分配给对应标签的作业。实验结果表明,相对于YARN中自带的调度器,其在作业执行时间上有很大缩短。
其他文献
对于网络运行过程中产生的海量日志信息,传统故障诊断方法很难进行实时而全面的日志分析。针对该问题,提出一种基于卷积神经网络（Convolutional Neural Network,CNN）的网络故障
“中国企业全球化发展是现实的选择，我们欢迎中国企业来比利时投资。”10月30日到11月1日，应国务院总理李克强的邀请，比利时王国首相夏尔米歇尔在正式访问中国时参加的首届中比
智能手机迅速普及,VR虚拟现实头盔技术亦日趋成熟。将手机与VR头盔结合,开发出虚拟现实的手机体感游戏。利用手机中的陀螺仪系统,实现惯性定位来捕获人身体的变化,达到体感操
自2011年我国形成商业育种格局以来,种业市场规模逐年提高,但2019年我国8家种业上市公司中却有4家净利润为负值。本文针对种业企业特点,对EVA模型的适用性及调整项目进行研究
任务调度和资源分配是云计算的两大关键技术,资源分配决定着资源使用规则,关系到云计算的执行效率和并发处理能力。针对绿色云计算中的资源管理与调度过程,在Map Reduce调度
Hadoop分布式文件系统在大规模存储和访问中具有广阔的应用空间。从基本概念、基本结构、元数据管理、数据存储、文件管理、数据容错6个方面对HDFS的实现原理进行了探究,可为
本文对城市空间数据基础设施数据的尺度和精度进行了研究,分析了衡量城市空间数据尺度的4个指标:比例尺、范围、详尽程度和分辨率,总结了现有测量规范对主要城市空间基础数据
报表处理是各类软件必不可少的内容。面对复杂的数据,传统的处理方式是通过Excel、Word等软件进行手工处理,这种处理方式不仅效率低而且容易出错。数据大多储存在数据库中,通