吴晟 SkyWalking 原生数据库发布与云原生下复杂部署关系的识别

Tetrate创始工程师

当今分布式系统架构

• 架构视角：多层INFRA基础设施的复杂体系，涉及多种云服务与业务部署。
• AWS服务视角：多种云服务与业务部署的复杂性。

分布式监控生态

• 常用监控数据源：割裂的监控数据形成数据孤岛。
• OpenTelemetryCollector：包括AWS distro，但存在拉模式与推模式的选型问题。
• 常见第三方集成：CloudWatch数据流，包括CloudWatch metrics with S3、CloudWatch Metric Stream (OpenTelemetry format)、Kinesis Data Firehose Delivery Stream、AWS Firehose receiver(OAP)、OpenTelemetry receiver(OAP)。

从垂直维度观测分布式系统

• Layer和Service Hierarchy：基于拓扑和服务发现的垂直拓扑结构。
• 云原生环境下的多层结构：Istio Mesh on EKS。
• eBPF Powered Observability：Rover agent和Cilium技术。

原生数据库生态加成

• BanyanDB数据模型：高效的数据模型与集群架构。
• BanyanDB Cluster：分布式数据库集群。
• BanyanDB on Cloud / AWS Infra：在云和AWS基础设施上的性能表现。
  • 性能：
    • CPU Usage：BanyanDB数据节点CPU使用率略高，但联络节点显著较低。
    • Memory Usage：BanyanDB数据与联络节点内存使用显著较低，比Elasticsearch节点低近5倍。
  • Disk I/O：
    • Disk Space Usage：BanyanDB比Elasticsearch节省约30%的磁盘空间，降低存储成本。
    • IOPS and Throughput：BanyanDB的IOPS和磁盘吞吐量显著较低，减少磁盘资源压力。
• V10 + BanyanDB 1.0 GA计划：
  • 大规模部署测试、HA和稳定性测试。
  • 分析后置，从OAP向数据库迁移。
  • 非索引列TTL，大幅降低metrics磁盘消耗。
  • (TBD)跨数据中心同步。