TECH

白鲸开源CEO郭炜:数据集成的未来在哪里?

提到数据集成,业内同仁觉得这有什么可讲的,不就是ETL么?也就是从各种数据库读取,然后转化,最后落到不同数据仓库里。其实随着大数据,数据湖,实时数据仓库和大模型的兴起,数据集成的架构已经从过去的数据仓库时代的ETL到大数据时代的ELT到现阶

topic: data-management type: 笔记 origin: 笔记 score: 7 addedAt: 2024-05-20

来源: https://mp.weixin.qq.com/s/ngb3K31zePkG1bGcSr21_Q


修订记录

版本时间说明
v12024-05-20初稿

原文总结

  • 提到数据集成,业内同仁觉得这有什么可讲的,不就是ETL么?也就是从各种数据库读取,然后转化,最后落到不同数据仓库里。其实随着大数据,数据湖,实时数据仓库和大模型的兴起,数据集成的架构已经从过去的数据仓库时代的ETL到大数据时代的ELT到现阶

我的感想

这篇文章主要是郭炜对数据集成成熟度报告的解读,这个报告非常值得一看

落地实践

  1. 结合当前场景补充可执行动作。
  2. 明确前置条件与风险边界。

评论