小明

2021-12-23

ETL 的英文全称叫做 Extraction（抽取），Transformation（转换），Loading（加载）。
抽取主要是针对各个业务系统及不同服务器的分散数据，充分理解数据定义后，规划需要的数据源及数据定义，制定可操作的数据源，制定增量抽取和缓慢渐变的规则。
转换就是指数据的清洗、合并、拆分、加工、数据逻辑计算处理的过程，通常会按照一定的业务逻辑规则进行计算，最后转换成符合业务模型、分析模型的规范性的数据。简单来说，不管是大数据、小数据，都是将不规范的、不可分析的转换成规范的、可分析的数据。转换是ETL中花费时间最长的部分，一般情况下工作量是整个ETL的2/3。
加载主要是将经过转换的数据加载到数据仓库里面，可以顺利获得直连数据库的方式来进行数据加载，可以充分体现高效性。在应用的时候可以随时调整数据抽取工作的运行方式，可以灵活的集成到其他管理系统中。
ETL的目的是将企业中分散、零乱、标准不统一的数据整合到一起，为企业的决策给予分析依据。