初始ETL：ETL的体系结构

更新时间:2022年11月10日09时48分来源:传智教育浏览次数:

好口碑IT培训

　　ETL主要是用来实现异构数据源数据集成的。多种数据源的所有原始数据大部分未作修改就被载入ETL，因而，无论数据源在关系型数据库、非关系型数据库，还是在外部文件，集成后的数据都将被置于数据库的数据表或数据仓库的维度表中，以便在数据库内或数据仓库中作进一步转换(因此，一般会将最终的数据存储到数据库或者数据仓库中)。ETL的体系结构如图2-1所示。

ETL的体系结构

　　图2-1 ETL的体系结构

　　在图2-1中，若数据源1和数据源2均为功能较强大的DBMS(数据库管理系统)，则可以使用SQL语句完成一部分数据清洗工作。但是，如果数据源为外部文件，就无法使用SQL语句进行数据清洗工作了，只能直接从数据源中抽取出来，然后在数据转换的时候进行数据清洗的工作。因此，数据仓库中的数据清洗工作主要还是在数据转换的时候进行。清洗好的数据将保存到目标数据库中，用于后续的数据分析、数据挖掘以及商业智能。

上一篇：基本数据统计分析：漏斗分析是什么意思? 下一篇：Kafka可以用在哪些地方？【Kafka应用场景】