TECH

从 Elasticsearch 到 SelectDB,观测云实现日志存储与分析的 10 倍性价比提升

在云计算逐渐成熟的当下,越来越多的企业开始将业务迁移到云端,传统的监控和故障排查方法已经无法满足企业的需求。观测云可以实现对云、云原生、应用及业务的统一监测,提供整体数据的分析、洞察、可视化、自动化、监测告警、智能巡查、安全巡查等服务。本文

topic: lakehouse type: 笔记 origin: 笔记 score: 8 addedAt: 2023-12-14

来源: https://mp.weixin.qq.com/s/llhhC_uZDLIZoK2MA8NOMg


修订记录

版本时间说明
v12023-12-14初稿

原文总结

  • 在云计算逐渐成熟的当下,越来越多的企业开始将业务迁移到云端,传统的监控和故障排查方法已经无法满足企业的需求。观测云可以实现对云、云原生、应用及业务的统一监测,提供整体数据的分析、洞察、可视化、自动化、监测告警、智能巡查、安全巡查等服务。本文

我的感想

这篇基于doris进行可观测性以及日志分析的文章,非常有启发意义。文中是自己实现了Metrics系统,并融合了日志系统;这里我在纠结,是直接把Metrics导入湖中,还是通过类似Trino进行联合查询? 04 设计采样逻辑,加速聚合查询性能 在适配过程中我们发现,尽管 SelectDB 性能强大,但在需要对超大数据集进行聚合计算时,仍然会占用较多的系统资源,计算的开销相对很高。而在可观测场景中,大部分的计算都是定性分析,而不是定量的绝对值精确分析。

落地实践

  1. 结合当前场景补充可执行动作。
  2. 明确前置条件与风险边界。

评论