互联网广告经过近20多年的发展,取得了显著的成果。2015年10月9日,美团网和大众点评网正式合并成立新的公司新美大,当前,新美大在020领域已成为最大的线上平台和场景入口,包括团购、外卖、广告、休闲娱乐、亲子、结婚、丽人等等业务,几乎涵盖所有生活服务场景,其中包含各类数据:跨行业种类数据、交易支付数据、用户浏览数据等等。联盟广告业务部是美团点评广告平台部的一个子部门,它定位于外部媒体,为美团点评商户采买流量,提供推广服务。基于此,联盟广告需要设计一套针对本部门的广告数据统计与分析平台,以数据图表的方式展现广告数据,它能够作多维度的离线统计和实时监控,为后续广告的精细化的投放、定向、决策提供数据依据,同时可以及时发现、规避和解决可能潜藏的问题和风险。本文主要介绍Kepler联盟广告数据统计与分析平台的设计与实现。离线数据模型使用Hive、Shell和Python处理,通过内部调度器去实现任务调度,实时数据模型使用Storm和Kafka的组合,数据库采用MySQL和Redis,后端业务框架采用Spring、Spring MVC、Mybatis。采用Hive处理离线数据,相比Hadoop,不需要书写复杂的MapReduce函数进行编程,更多的关注HQL,减轻开发难度和成本。而实时数据处理使用Storm和Kafka,因为它非常适合广告日志的处理。最终项目正常运行并上线,对平台的运营和广告实时竞价的决策具有非常重要的意义。