基于在混合云环境下的多年耕耘,云杉网络自主研发的云监控服务平台DeepFlow已在金融、电信、能源等行业中的数十家世界五百强客户处得到了广泛的应用。我们宣布将DeepFlow核心的可观测性数据引擎MetaFlow正式开源(5月11日揭晓),我们希望将更好的可观测性能力、自动追踪和自动标签能力开放到整个行业,帮助企业客户改进云原生运维工作的运行效率、稳定性和计算成本。

MetaFlow是什么?

MetaFlow是一个高度自动化的可观测性平台,是为云原生应用开发者建设可观测性而量身打造的全栈、全链路、高性能数据引擎。MetaFlow的AutoTracing能力创新的使用eBPF实现自动化的分布式链路追踪,并自动关联OpenTelemetry实现真正的云原生环境全栈、全链路追踪。MetaFlow的AutoTagging机制能够自动为所有观测数据注入丰富的云原生资源属性、API属性标签,打破数据孤岛,释放数据的下钻切分能力。

MetaFlow拥有开放的架构,基于WASM的可编程应用协议解析能力、可扩展的观测数据源、插件式的分析数据库接口、统一的SQL查询接口,让使用者可将其快速融入自己的可观测性平台中。MetaFlow易于维护,仅由Agent、Server两个组件构成,无需依赖任何其他组件即可实现水平扩展与负载均衡。MetaFlow追求极低的资源消耗,使用Rust实现采集器,通过SmartEncoding实现10倍性能的数据标签注入。

为什么要开源?

建设可观测性已经成为云原生应用开发者的必要工作,然而现有的解决方案正悄无声息的消耗着开发者越来越多的时间。开发者需要考虑如何埋点插码,如何传递追踪上下文,如何关联不同类型的数据,如何控制数据的猖獗增长,如何避免高基标签,如何维护越来越复杂的平台,这些工作严重挤占了业务开发工作的时间。

MetaFlow拥抱开源社区,设计了良好的数据源、存储、可视化扩展能力。通过MetaFlow,我们希望让观测更自动,让开发者更自由。

发布内容:MetaFlow:开源的高度自动化可观测性平台

发布方式:线上多平台直播(云杉网络视频号、开源中国视频号、云原生社区视频号、开源社KAIYUANSHE视频号、示说直播平台)

发布时间:2022年5月11日(周三) 晚20:00～21:30

演讲主题:

《MetaFlow:开源的高度自动化可观测性平台》—— 云杉网络 研发VP 向阳

演讲内容:

云原生应用开发者获取可观测性的沉重负担

打造可观测性数据平台所要具备的基础能力

MetaFlow开源可观测性平台的软件架构

基于eBPF的高度自动化可观测性能力

全栈、全链路的可观测性建设落地实践

开放的 MetaFlow,与开发者共拓更多应用场景

听众受益

“让观测更自动,让开发者更自由”,通过此次分享你能了解我们如何从细节的软件架构设计中体现对这一使命的追求,而且也能看到eBPF、AutoTracing、AutoTagging、SmartEncoding等技术在可观测性领域极富创新的落地实践。