TECH
白鲸开源CEO郭炜:数据集成的未来在哪里?
提到数据集成,业内同仁觉得这有什么可讲的,不就是ETL么?也就是从各种数据库读取,然后转化,最后落到不同数据仓库里。其实随着大数据,数据湖,实时数据仓库和大模型的兴起,数据集成的架构已经从过去的数据仓库时代的ETL到大数据时代的ELT到现阶
来源: https://mp.weixin.qq.com/s/ngb3K31zePkG1bGcSr21_Q
修订记录
| 版本 | 时间 | 说明 |
|---|---|---|
| v1 | 2024-05-20 | 初稿 |
原文总结
- 提到数据集成,业内同仁觉得这有什么可讲的,不就是ETL么?也就是从各种数据库读取,然后转化,最后落到不同数据仓库里。其实随着大数据,数据湖,实时数据仓库和大模型的兴起,数据集成的架构已经从过去的数据仓库时代的ETL到大数据时代的ELT到现阶
我的感想
这篇文章主要是郭炜对数据集成成熟度报告的解读,这个报告非常值得一看
落地实践
- 结合当前场景补充可执行动作。
- 明确前置条件与风险边界。
评论