Sparkstreaming相关论文
实时气象卫星数据存在多源异构、高时效性等特点，使得气象部门不易及时发现实时卫星数据在传输过程中的各种问题，对下游实时卫星数据......
随着互联网技术的飞速发展,互联网应用所暴露出来的服务不再集成于某一物理机器上。它们通常位于不同服务器,并通过RPC（远程过程调......
近年来,随着大数据技术的快速发展,大数据处理平台迅速兴起.大数据处理平台具有高吞吐量、网络协议多、端口多、数据量大、高并发......
伴随计算机的发展和普及,每天产生海量的数据,如何从繁杂的数据中及时快速地挖掘出有价值的信息,具有深刻的意义,这就需要数据挖掘......
随着大数据时代的到来,数据中心已经成为重要的基础设施。网络安全威胁层出不穷,数据中心的安全成为大家关注的焦点。针对数据中心......
近年来,随着煤矿信息化程度的提高,采、掘、提、运、通等系统设备在生产过程中产生了海量的安全生产管控数据与经营管理数据,在智......
瓦斯灾害是煤矿领域的重大安全问题。随着煤矿智能化水平的不断提高,瓦斯浓度预测预警技术对煤矿灾害的防治起着至关重要的作用。......
城市的发展使得运营车辆日益增长,车辆调度愈发困难,传统系统无法满足现有众多车辆的监控调度与运营.该程序基于大数据流处理系统,......
期刊
随着大数据、云计算及人工智能等技术的快速发展,推荐系统在电商平台中扮演着愈加重要的角色,在用户留存、GMV提升等方面有显著贡......
针对供热环境在城市间一体化程度的提高而引发的设备种类繁多、采集信息量大、数据类型多样化、处理和分析困难以及各设备数据信息......
Spark Streaming作为主流的开源分布式流分析框架,性能优化是目前的研究热点之一。在Spark Streaming性能优化中,业务场景下的配置......
Spark Streaming是大数据流式计算的最新进展,是建立在Spark引擎上的批量流式数据计算平台。它将流式计算看作一连串短小的Map/Red......
随着云平台以及相关技术的进步发展,人们开始将越来越多的工作交付计算机集群来处理。其中比较有代表性的就是对海量视频数据的处......
互联网技术的发展以及线上交易平台和应用的普及,使得大量交易数据产生,数据分析在企业内部的重要性日益凸显。但是大部分交易数据......
日常生活中存在着很多二分网络结构,譬如用户-域名网络,云服务中相互承载的源IP-域名网络等等。二分网络中存在着社团结构,基于社......
随着我国广电信息技术与产业的快速发展,广电节目内容与视频服务日益丰富。为了避免大屏电视交互中用户发现和匹配个性化内容效率......
系统前端的管道泄漏监测主要采用声波法、负压波法等,这些方法最主要的缺点在于无法识别各种复杂的工况,从而产生较多误报。另外随......
基于发布/订阅模型的数据分发服务DDS是OMG组织提出的一个分布式实时中间件通信规范,它提供了高效的通信机制,支持以数据为中心的......
随着互联网技术和云计算平台的快速发展,越来越多企业采用SaaS(Software as a Service)化平台构建信息服务。SaaS化平台多应用多租......
Spark Streaming是大数据批量流式计算系统的最新进展,其核心技术特征是将接收的流式数据按时间顺序切分为多个小批次,并使用批处......
计算机技术和网络技术的飞速发展使人类社会进入大数据时代。随着全球数据量的爆炸式增长,原先的单机处理模式已经无法满足海量数......
随着大数据时代的到来,网络招聘已成为招聘的首选方式,但海量的职位信息带来了信息过载,众多求职者想找到心仪职位必须要依靠求职......
随着信息技术的飞速发展和企业信息化建设的不断完善,网络和信息系统已经全面覆盖企业经营、客户服务等业务领域和各层级应用,网络......
随着社交网络上文本数据量的暴增,基于传统单机的情感分析算法已经不能够及时和快速地处理文本情感数据,本文提出一种基于Spark St......
在校园网用户爆炸式增长的今天,校园网运维任务越来越重.本文结合运维实际,提出了综合运用Apache Flume、Apache Kafka、Spark Str......
随着互联网技术深刻而广泛地改变了人们的生活方式,我们越来越发现这些留在互联网上的生活痕迹具有数量大,分布广,能够通过数据分......
基于NetFlow的网络流量分类是利用机器学习方法对传统的网络流量识别方法的一种改进和辅助,但这种方式无法真正起到实时网络流管控......
In recent years,with the continuous development of DDoS attacks,DDoS attacks are becoming easier to implement.More and m......
21世纪社会文娱产业得到了快速的发展,而视频作为一种生动形象的信息载体更是受到了人们的青睐。快速增长的视频业务带来的爆炸式......
回 回 产卜爹仇贱回——回 日E回。”。回祖 一回“。回干 肉果幻中 N_。NH lP7-ewwe--一”＄ MN。W;- __._——————》 砧叫]们......
ue＊M＃’＃dkB4＃＃8＃”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:（100084川C京市海淀区清华园申请人:清......
机动车缉查布控系统以治安交通卡口系统为基础,将公路运行车辆的构成、流量分布、违章情况等信息进行汇总,实现对车辆轨迹的查询分......
随着移动互联网技术的大规模发展,创新型互联网公司和迭代型各行各业应用产品层出不穷,门户访问、好友互动等操作产生的大规模日志......
随着我国自主研发的EAST(全超导托卡马克)装置实验不断地开展,产生的实验数据的总量日益增加。实验数据大部分都放在MDSplus中,目......
针对高校网站管理者对网站访问情况及时、直观了解的需求,本文提出了一种以SparkStreaming为核心的分布式网站访问日志分析系统。......
