论文部分内容阅读
传统日志系统和基于Hadoop的离线日志系统在分析海量日志时都具有时延长、效率低等弊端。为构建新的基于Hadoop的在线日志系统，提出了新的数据分级归档机制，用以管理海量日志数据并形成分级优化的存储文件结构。实验结果表明该机制具有良好的可扩展性，可以有效存储海量日志数据；同时，它还有助于加快系统的数据处理速度，缩短系统的处理响应时间，使其满足在线处理的要求。