01/企业数字化背景和趋势
- 企业数据资产价值体现为DIKW模型(数据、信息、知识、智慧)
- 数据处理经历从传统架构到分布式架构的演进
- 招猎业务数据架构存在数据孤岛、扩展性差等弊端
02/ Why Data Warebase?
- 分布式Data Warebase是数据开发新范式
- 通过发现而非发明实现技术突破
03/ Data Warebase系统架构
- 总体架构:多云存算分离,虚拟化计算集群
- Warebase:虚拟化计算集群,由可快速增减的容器化Units组成
- Database:数据存储逻辑单元,支持多副本高可用,自动扩容
04/ Data Warebase关键技术
- 存储格式:支持列存、行存、多种数据类型及半结构化数据(Json/JsonB)
- 丰富索引:支持全局二级索引、倒排索引、Json索引、向量索引等
- 分层存储:无限扩展,水平扩展架构
- 高性能查询:分布式执行计划、向量化引擎、索引加速、物化视图
- 高性能数据操作:交互式增删改,分布式事务支持完整ACID
- 兼容性:兼容PostgreSQL生态(驱动、框架等)
- 负载均衡:业务软隔离,自适应架构
- 自适应技术:数据自动分片、自适应建索引、编码策略、一阶段事务、查询优化
05/企业私域数据智能化探索
- 生成式AI加速企业私域数据智能化
- 检索增强生成(RAG)技术
- OmniSearch全场景搜索
Data Warebase挑战极限,让数据涌现智能