行业研究公司研究宏观策略财报招股书会议纪要海南封关低空经济 DeepSeek AIGC 大模型

匡凌轩-虎牙业务监控的标准化改造实践

信息技术2024-05-132024 第22届 GOPS 全球运维大会暨 XOps 技术创新峰会 · 深圳站小***

AI智能总结

虎牙业务应用监控的标准化改造实践

项目背景

虎牙直播的可观测平台负责人匡凌轩主导了OpenTelemetry标准化改造项目，旨在解决现有监控方式多样、不标准化、难以通用的问题。项目需兼顾业务自定义和标准化需求，同时兼容新旧系统，实现统一转换和存储。

方案实践

Otel标准化思考：
- 基于业界标准Otel，采用组件化设计。
- 解决存量和增量上报兼容问题，设计Otel Metrics统一方案。
- 构建统一链路架构，包括：
  - Receiver：支持老协议和Otel上报。
  - Processor：验证、清洗、转换数据。
  - Exporter：转换OTLP后统一输出到Kafka。
元数据分析设计：
- 设计元数据模块，支持多协议、可配置化数据处理。
- 数据处理组件包括：
  - Process：Batch、Step、Expired等。
  - Filter：BloomFilter、RestfulURI等。
  - Storage：Mysql、GraphDB等。
  - Expression：SpEL、JsonPath等。
  - Mapping：SPI、Bytecode、Reflect等。
  - Manage：Grayscale、Sampled等。
  - Type：Metric、Trace、Log等。
  - Protocol：Kafka、Http、Grpc等。
  - Data：Json、Otlp、Text等。
告警模块设计：
- 指标可视化、业务告警、多维下钻。
- RPC主被调下钻分组展示。
- 业务自定义指标多维根因下钻。

效果展示

接入零成本：通过框架集成和字节码植入实现。
接入效率问题：解决重复开发、提高复用性。
业务覆盖率：支持多种语言框架和应用服务。
告警根因定位：通过告警分析和多维下钻实现。

未来展望

基于Otel可观测元数据自动分析。
Otel生态贡献：Meta Analyser等更多生态组件展望。

总结

项目通过OpenTelemetry标准化改造，实现了监控方式的统一和标准化，提高了接入效率和业务覆盖率，并通过告警模块设计优化了根因定位能力。未来将基于Otel生态进一步拓展功能，提升可观测平台能力。

虎牙业务应用监控的标准化改造实践匡凌轩可观测平台负责人匡凌轩虎牙直播可观测平台负责人虎牙直播可观测平台负责人，负责虎牙事件中心、元数据、计量计费、统一可观测和告警等平台建设，最近主导可观测平台OpenTelemetry标准化改造等项目从零到一实践落地；曾任职欢聚时代集团，负责YY直播Web研发团队，主导业务高可用、高并发分布式服务架构设计和实现，保障过多届年度盛典等海量用户业务场景。虎牙公司是一家致力于打造全球领先直播平台的技术驱动型内容公司，在直播游戏化、虚实融合技术方面积累了丰富经验，为用户和行业赋能。 01项目背景 02方案实践 03效果展示如何兼顾业务自定义和标准化项目背景效果衡量 01 02 03 •基于业界标准- Otel标准、组件化 •监控方式多样-不标准化、难以通用 •新旧同时兼容-统一转换、统一存储 •接入零成本-框架集成、字节码植入 •接入效率问题-重复开发、不够复用 •业务覆盖率-语言框架、应用服务 •告警根因定位-告警分析、多维下钻 OpenTelemetry标准化统一改造 Otel标准化思考 1.存量和增量上报同时兼容 2.Otel Metrics统一设计方案 Otel统一链路架构 1.Receiver:同时兼容老协议和Otel上报2.Processor:验证、清洗、转换等3.Exporter:转换OTLP后统一输出到Kafka 元数据分析设计告警模块设计多维根因下钻指标可视化、业务告警、多维下钻 RPC主被调下钻分组展示业务自定义指标多维根因下钻未来展望基于Otel可观测元数据自动分析未来展望 Otel生态贡献-Meta Analyser 03 02 01 多协议支持可配置化数据处理 - Process: Batch、Step、Expired...-Filter: BloomFilter、RestfulURI...-Storage:Mysql、GraphDB... -Expression:SpEL、JsonPath...- Mapping:SPI、Bytecode、Reflect...- Manage: Grayscale、Sampled... - Type:Metric、Trace、Log...- Protocol: Kafka、Http、Grpc...- Data: Json、Otlp、Text... Alarm & Cause AnalyserComponent 更多生态组件展望高效运维社区DevOps时代荣誉出品感谢大家观看

点击免费查看完整报告