TECH

网易有道关于实时湖仓的实践之路

DataFunTalk 2023-12-27 13:00

来源： https://mp.weixin.qq.com/s/it0msNzl6WATlcqOREgOSQ

修订记录

原文总结

• DataFunTalk 2023-12-27 13:00

我的感想

Amoro是一个构建在Iceberg等开发数据湖表格之上的一个湖仓管理系统，提供一套可插拔的数据自优化机制和管理服务。它的开源社区一直在发展中，也在准备可以支持Hive和Hudi，这个是针对Hive的Mixed Hive。个人感觉肯定有很多可借鉴之处，但是又会比较自闭环，难以跟我们的元仓等很好结合，所以这里需要做一个选型。

落地实践

1. 结合当前场景补充可执行动作。
2. 明确前置条件与风险边界。