hadoop平台相关论文
在科技高速发展推动下,人们逐渐走进了互联网时代,数据呈现出爆炸式增长的趋势,微博与微信等信息特性主要体现为存储分散、数据大且呈......
在新时期发展背景下,患者由于病情的多样化复杂性对于检查、治疗、用药等费用差异性需求逐渐增多,而传统监管医保基金使用方法已无法......
信息大爆炸产生的数据数量非常庞大且复杂,其中不仅有结构化与半结构化的数据,还有着非结构化的文本、图像、视频等信息数据。因此,对......
本文着重探讨如何使大数据的智能可视化,从而促进大数据的智能化持续发展。从大量数据中抽取有用信息、分析信息、智能化处理和可视......
为了进一步提高网络安全趋势大数据的挖掘性能,提出一种基于Hadoop平台的网络安全趋势大数据深度挖掘方法。考虑网络安全趋势大数据......
针对大数据可视化需求,基于网络公开的用户行为大数据(部分数据可以借助网络爬虫等算法自主抓取),依托Hadoop开源大数据处理平台,利用J......
传统Apriori算法在大数据挖掘中存在速度慢、效果差等缺点,论文提出一种基于Hadoop平台的Apriori改进算法:改进算法的数据库扫描机......
近年来,国家对高校教育的重视程度不断增大,高校扩张也在持续增加,大学生的人数也越来越多,从而产生了许多问题和挑战。其中大学生......
本文通过搭建Hadoop平台搭建校本数据中心,并将数据集中存储在HBase数据库中.基于Hadoop的校本数据中心,提供了强大的数据统一存储......
传染病在人类历史上屡次对人类生命及财产安全造成重创,从天花、鼠疫、SARS再到2019年底爆发的新冠疫情,每次大规模疫情的爆发都对......
近年来,各类突发事件给人们的生命和财产造成了巨大损失,尤其是新冠肺炎疫情的爆发,各国对应急管理能力有了更高的要求。其中,应急......
文章通过介绍基于hadoop平台下数据治理系统在高校数据治理中的意义和价值,就高校数据治理的现状如何进行数据治理、如何建立数据......
基于医学影像大数据平台,实现图像的采集存储和分析处理,为疾病诊断提供辅助决策。平台基于Hadoop平台和HDFS系统数据采集存取等,通过......
设计一个基于Hadoop分布式文件系统的数据挖掘平台,并基于最大最小距离的思想对K?means算法进行改进.在Hadoop分布式文件系统平台......
Hadoop在大数据处理中有不可替代的优势.本文旨在设计一个面向Hadoop的应用网关,使得远程用户可以调用Hadoop平台来执行计算任务.......
针对现有传统算法计算准确度低、初始中心离群点较远等缺点,文中以电网工程数据的LCC模型为基础,提出了一种适合于电网系统全寿命......
数据处理流程在信息爆炸的今天应用广泛并呈现出海量和并行的特点,MapReduce编程模型的简单性和高性价比使得其适用于海量数据的并......
Hadoop平台下的作业调度器主要有三种:先进先出调度器(FIFO)、计算能力调度器(Capacity Scheduler)和公平调度器(Fair Schedule......
针对目前Web数据规模的快速增长,传统的基于单机的数据挖掘模式不能胜任当前Web海量数据存储与处理。随着“云计算”技术的兴起......
供应商对于企业来说是物流源头,更是提高其竞争力的战略筹码。并且随着市场竞争的日趋激烈,顾客对于产品的需求变的更加多样化、个......
当前处在一个网络信息大爆炸的时代,网络信息超载已经成为一个急需解决的问题,推荐系统是一种解决信息超载的有效手段,通过推荐系......
随着互联网技术的迅速发展,社交网络逐渐成为一种快速便捷的信息分享和交互平台。作为当前国内社交网络巨头之一,新浪微博热门话题的......
目前,随着“互联网+”时代的到来,各行各业都将传统行业和互联网进行整合,来达到产业的升级换代,由此必然会产生海量的互联网数据......
在飞速发展的互联网技术中,数据量的增长呈爆炸性的趋势。数据作为信息的载体,在信息化的发展过程中占有举足轻重的地位。海量数据......
在21世纪的今天,飞速发展的互联网给人们日常生活带来了巨大的便利,各行各业都在向互联网化靠拢。同时,用户在网络上的行为足迹大......
复杂网络作为生活中电力系统、通信网络和万维网等复杂系统的高度抽象,复杂网络社团结构表示着网络中的节点聚合的趋势,是复杂网络......
Hadoop所具有的并行化处理对开发者透明的优点,使其成为当前应用最广泛的云计算平台。但Hadoop平台下的各项技术还处于完善阶段,其中......
近年来,推荐服务已经成为亚马逊、Netflix,Flicker,Delicious等一类用户虚拟生活平台上的一项基本服务。在这些虚拟生活平台上,用户可......
大数据时代,数据成为一种资源,而大数据的特点又影响着数据应用和价值产生。数据挖掘作为知识和价值发现有效工具,聚类算法又是数据挖......
当前越来越多的企业建立了企业内网,其中安全问题是建设企业内网关注的焦点。为了提高企业内网防御网络恶意行为的能力,本文通过对企......
分类是数据挖掘中的重要技术,广泛应用于电子商务,生物信息学,商业智能等领域。然而,随着科技的发展特别是互联网技术的普及,数据规模和......
随着互联网、移动互联网的快速发展,互联网从开始的内容的传递者到内容的第一生产地,从社会精英的通信、信息管理和计算工具到社会大......
Hadoop是一种分布式数据和计算的框架,在海量数据处理中应用非常广泛。MapReduce是一种程序设计模型,Hadoop正是以MapReduce作为核心......
随着互连网从传统PC蔓延到移动领域,海量信息数据存储技术也得到了快速发展,其中,Hadoop云计算平台技术是许多企业处理大数据的首选。......
传统的工作流系统无法满足企业构建数据密集型应用的需求,需要借助于Hadoop平台处理大数据的能力。现有的Hadoop工作流系统采用自定......
自2007年以来,云计算是目前国内外商业和科研机构研究的热点之一,它是一种通过互联网将数据中心的各种资源打包成服务向外提供的商业......
近几年,Hadoop以其低成本、高容错、易编程的优势得到广泛应用,同时,Hive作为目前最成熟、应用最广泛的数据仓库工具,可以将SQL语句转......
互联网技术的迅猛发展,互联网数据呈现爆炸性的增长,面临海量数据处理问题。云计算作为一种新的模型提出来,发展极为迅速。云计算......
随着数据呈现海量式的增长方式,数据规模和数据维度都在不断增加,数据的冗余问题越来越严重,而且用户对于数据的需求也逐渐出现差......
利用计算机技术实现的树种检索系统已是林业人员必不可少的鉴别树种工具。由于现存树木种类繁多,系统响应时间是树木检索系统的一......
随着互联网行业的蓬勃发展,人们对大数据技术的应用更加深入和广泛。作为主流的海量数据并行计算平台,Hadoop在性能方面正面临越发......
现实生活中,互联网逐渐走进了千家万户,随着移动端和PC工具的普及,网络产生的数据量也在随之不断地增加。图片、音频、音乐、文档等诸......
随着大数据时代的到来,数据量急剧增长。如何从这些海量的数据集中挖掘出有价值的信息,已经成为时空数据挖掘的一个热点问题,时空离群......
随着人类对物质世界认识的不断深入,需要设计能量和精度更高的高能物理实验装置,由此将产生海量的数据,这些数据的存储和处理面临着巨......
云计算是一种新兴的并行计算技术,在学术界和商业界都取得了巨大的发展,已有大量的云计算系统被投入使用。现有的Hadoop平台在异构......