论文部分内容阅读
大数据的分析和挖掘过程,数据抽取是关键环节。目前大多采用全量抽取、CDC等方式,具有一定的局限性。本文提出了一种基于日志分析的增量抽取,并设计了基于大数据的高校教学数据智能处理平台,实现"业务与数据"的分离。ETL数据抽取关键功能,采用数据库增量抽取方式,与传统方式相比,具有很好的实用价值。