ETL(数据提取、转换、加载)
ETL (Extract, Transform, Load)
把分散在各处的数据提取出来、整理干净,再搬运到需要用到的地方的数据处理过程。
简单来说
ETL有点像搬家时打包行李的过程。先把散落在家里各个房间的物品集中到一处(提取),按类别整理好装进合适的箱子(转换),再搬到新家里指定的位置摆放好(加载)。企业或服务中积累的数据也是同样道理——分散在多个系统里,格式也各不相同,所以要让人分析或者训练AI模型之前,都得先经过收集、整理、搬运这一整套过程。
如果这个过程做得好,AI模型或分析工具就能用上干净、一致的数据;反过来如果这一步做得很乱,再好的模型也难以得出理想的结果。因此ETL表面上并不起眼,却被视为让AI服务真正运转起来不可或缺的“管道工程”。