TECH
Single Engine + All Data :云器科技推出基于“增量计算”的一体化湖仓平台
本文整理自 云器科技CTO关涛 在2023年7月「Single Engine · All Data」发布会上分享的内容,概述了数据平台技术的整体发展趋势,阐述下一代数据平台的设计目标,并深度解读云器科技基于“增量计算”的一体化数据平台——云
来源: https://mp.weixin.qq.com/s/wnHr7ucatvCMu2I6oW_T9Q
修订记录
| 版本 | 时间 | 说明 |
|---|---|---|
| v1 | 2024-01-31 | 初稿 |
原文总结
- 本文整理自 云器科技CTO关涛 在2023年7月「Single Engine · All Data」发布会上分享的内容,概述了数据平台技术的整体发展趋势,阐述下一代数据平台的设计目标,并深度解读云器科技基于“增量计算”的一体化数据平台——云
我的感想
云器这个感觉理论架构很牛啊。希望有开源的引擎出来 由于流、批、交互三种计算引擎的计算模型、数据驱动方式、存储系统设计、调度系统设计、资源模型等均不相同,都很难覆盖另外两个的场景,他们三者本身难以完成统一计算模式。通过 Compaction 达到效率和成本的平衡。
落地实践
- 结合当前场景补充可执行动作。
- 明确前置条件与风险边界。
评论