论文部分内容阅读
人类已经进入了大数据时代,数据资产成为了企业的核心竞争力,如何围绕电信企业的大数据资产,构建大数据生态系统,以用户体验为导向,创新商业模式,成为了电信企业面临的重要任务。面向电信企业的大数据分析平台,其建设的原则是建设完善的、高性能的、开放的平台;大数据能力平台构建的稳定性是最重要的,重点需要关注部件的性能,以及对某项技术的更新换代。同时提供大数据应用能力开发的开发环境Develop Studio,使大数据合作伙伴能够直接在这个平台上开发应用、发布应用和运行应用。同时,大数据平台的基本架构实现全部云化。基于电信企业对经营分析大数据的需求,本文对基于Hadoop的电信经营分析大数据分析平台的架构进行了设计并对部分功能模块进行了实现。对基于Hadoop的电信运营商大数据平台进行了设计与实现,对此平台的数据、技术架构进行了设计,对架构中的信息整合、数据资产、能力开放等模块进行了设计;,对Hadoop集群在本系统中的应用模式与应用特点进行了设计,对增强的Hadoop架构,以及Hadoop中的HDFS、MapReduce、HBase、MPP等增强功能进行了在系统中的设计。对平台的资源管理模块的实现进行了描述,对运维管控模块进行了实现,尤其对元数据的管理和数据安全进行了详细的实现。实际使用的结果表明,Hadoop架构适合进行电信经营数据的分析统计。本文设计实现的大数据经营分析平台具有很强的实用性。