从数据库历史看分布式数据库的架构设计趋势_赵伟

数据库应用和管理新方法

数据库技术发展历史回顾

• 拓荒时代的教训：强调模块化、软件复用、软硬件分离、数据管理与应用逻辑隔离。
• 现代数据库技术理论基础：关系代数和SQL、事务模型和ACID。
• 高可用与持续服务能力：基于复制实现高可用，分析MySQL Binlog和PostgreSQL逻辑复制的优缺点。
• NoSQL的演变：从No SQL到Not Only SQL再到No! SQL，探讨其取舍和倒退。
• 数据管理的螺旋上升与价值回归：分布式关系型数据库与分库分表中间件的本质区别，强调水平弹性伸缩、真正的事务、线性可扩展和容错能力。

分布式数据库选型的新思考

• 必备的基础能力：水平弹性伸缩、金融级高可靠性（自动故障恢复和转移）、全面提升人效。
• 数据分析：支持分析最新业务数据和实时流式数据汇聚。
• 必备的高级SQL功能：SQL兼容性、视图、数据安全、访问控制等。

KunlunBase架构与核心技术

• 主要组件：计算节点、存储集群、元数据集群、集群管理API等。
• 水平弹性伸缩：支持数据分区、数据分布、自动扩缩容。
• 金融级高可靠性：自动故障恢复、转移和切换，确保RTO < 30秒 & RPO=0。
• HTAP混合负载：OLTP & OLAP一份数据，两类负载互不干扰。
• MySQL、PostgreSQL和SQL兼容性：融合两种协议和语法，支持JDBC、ODBC等。
• 数据安全和校验机制：连接加密、存储加密、多层级细粒度访问控制、有效性验证。

分布式数据库时代应用架构师和DBA的新任务

• 应用架构和数据设计：简化应用架构设计，设计数据分布方案，发挥高级SQL功能价值。
• DBA：保障数据安全有效：在数据源头建立安全和校验机制，持续优化性能和故障分析。
• DBA：服务器资源规划与分配：资源预留、分配和清理。

KunlunBase未来技术展望

• 技术方向：Persistent Memory (PM)、WAL、WAL-less、计算节点多线程、JIT、向量化。
• 性能目标：KunlunBase-1.3性能目标：TPS翻倍，延时缩短50%以上，超越最新版本的Oracle和MySQL单机性能。