摘要

为了在大数据处理下提高ETL开发效率、任务维护及监控能力、减少人工操作、在多种相似数据存储过程中共享ETL过程,文章提出一种基于大数据平台化的ETL可复用框架。根据ETL工作原理、数据存储过程以及任务特点,在任务调度开发、数据存储过程方面进行了改进,以配置文件方式进行自动化开发模式,从而构建基于大数据平台化ETL可复用框架。

  • 单位
    长春理工大学光电信息学院