【摘 要】
:
海量的网络设备日志中蕴含了大量的有价值的信息,传统的数据处理方法难以满足处理海量数据的需求,云计算平台Hadoop能有效地处理海量数据.研究并构建了一个基于Hadoop和Hive的海量网络设备日志存储和处理系统,其对海量网络设备日志进行结构化预处理、统一存储,并提供在线检索功能,实现了网络地址溯源,丰富了网络管理员的网络管理手段.
【机 构】
:
中国农业大学网络中心 北京 100083
【出 处】
:
中国计算机用户协会网络应用分会2014年第十八届网络新技术与应用年会
论文部分内容阅读
海量的网络设备日志中蕴含了大量的有价值的信息,传统的数据处理方法难以满足处理海量数据的需求,云计算平台Hadoop能有效地处理海量数据.研究并构建了一个基于Hadoop和Hive的海量网络设备日志存储和处理系统,其对海量网络设备日志进行结构化预处理、统一存储,并提供在线检索功能,实现了网络地址溯源,丰富了网络管理员的网络管理手段.
其他文献
3D视频近年来发展迅速,3D显示设备日趋完善,构建实时3D视频源将是未来立体显示中的关键技术.本文在实时多视点裸眼3D图像处理系统的平台上,为了改善3D视频输出的清晰度以及程序的运行效率,从系统层次、算法层次和代码层次对拼接算法进行了软件优化.测试结果表明,清晰度提升明显,运行效率有显著提高,视频能够实时输出.
本文研究多视点裸眼立体显示视区变换,提出一种微移即可实现视点切换的狭缝光栅立体显示器.该显示器是利用压缩视点间距的方法,实现只需人眼微小的空间位移就可获得立体图像的更换.分析光栅的分光机理,提出视点间距压缩后立体显示器各个参数之间的约束条件,采用TracePro光学软件进行仿真论证,结果表明,通过压缩视点间距,在没有引入新串扰度分量的前提下,实现了微小位移即可切换立体显示视区(G),有效提高立体显
本文提出了一种基于单层触摸传感器的新型结构投射电容式触摸屏.此技术通过一个简单的电路模型定位触摸点,可以有效解决存在于其他大尺寸单层触摸传感器触摸屏中的RC延迟大、灵敏度降低和坐标漂移等问题,在大尺寸触摸屏中具有广阔的应用前景.
针对大数据技术,提出信息自传方法.通过自传,提供大数据服务的各种系统,从而可以获得如下信息:1)用户的需求,2)用户的特长,3)用户授权使用的个人信息.大数据系统针对上述同一用户身份的行为也形成其主体标签.结合使用用户特长信息,当用户针对其专长领域进行搜索等操作时,大数据服务可记录、处理其行为,并用来给网上资源加上语义的描述标记.利用资源标签和用户需求信息,系统提供更具有针对性的服务.
2013年被称为互联网金融元年,移动支付、社交网络、大数据和云计算等互联网信息技术催生互联网企业跨界开展互联网金融业务.互联网金融作为产业与资本融合的创新模式在中国发展很快,这既带来了机遇也带来了挑战,同时也面临着多方风险.
针对现代物流行业的发展趋势和建设第四方物流的必要性,结合云计算技术研究,实现了适应大数据量、高扩展性、高性能要求的第四方物流服务云平台,分析了其在电子商务业和现金制造业的应用,并将其作为实现第四方物流服务的技术基础.
互联网金融企业并购案例层出不穷,分析了中外两大最具代表性行业的并购案例.在分析并购前后企业优劣势的基础上,进行了中外企业在互联网金融并购方面的对比.通过国外企业的成功经验,给出了国内互联网金融企业并购的指导意见.
近年采,随着云计算等应用模式的发展,数据中心网络在组成、结构、功能及应用模式等方面正发生着深刻的变革.从阐述云计算数据中心的相关概念入手,分析了云计算数据中心的网络结构特征,探讨了云计算数据中心的网络结构设计关键技术,希望能为云计算数据中心网络的理论研究和系统设计实践提供基本的借鉴和参考.
云时代飞速发展的科技引发了一次次的教育变革,移动学习作为一种新的学习模式越来越多地受到学习者的关注.通过对移动学习和云计算特点的探究和归纳,在分析了云计算对移动学习影响的基础上,提出了基于云计算的移动学习平台结构设计,充分利用云计算的海量数据存储与高性能计算能力,解决了现有移动学习模式中存在的计算能力差、存储空间小、资源共享程度低等问题.
随着云计算、移动互联网相关理论和技术快速发展,移动云终端的概念不断提及.越来越多的用户希望通过移动设备可以方便快捷地使用云服务,从而扩大移动设备的存储和计算能力.针对上述问题,提出了一种移动终端云存储模型,并给出了实现方案.该模型能够使用户通过智能手机、平板电脑等移动终端登录云端,并在云架构的支撑下,以云端的信息存储和处理为核心,借由各种无线通信标准,实现用户在移动终端对信息的获取和反馈,并将信息