分布式ETL中协同机制的研究与设计

摘要

ETL工具在构造数据仓库过程中负责数据抽取、转换和加载的工作.商用的ETL工具一般需要运行在高性能的服务器如小型机上进行大量的计算工作,造成数据仓库项目在硬件方面的成本必须大大的提高.针对计算效率的问题,提出了一种多计算服务器的协同计算模型,通过创建一协调中心来控制多计算服务器的协同处理计算来增加计算能力.与原有的ETL具相比,可以在一定程度上降低ETL工具对服务器硬件性能的要求.