登录
注册
个人信息
我的订单
我的报告豆
我的优惠券
我的笔记
我的阅读
我的收藏
我的下载
我的上传
我的订阅
在线客服
退出登录
回到首页
AI
搜索
发现报告
发现数据
发现专题
专题报告
专题百科
研选报告
定制报告
VIP
权益
付费社群
发现一下
行业研究
公司研究
宏观策略
财报
招股书
会议纪要
Token
低空经济
十五五
AIGC
大模型
当前位置:首页
/
行业研究
/
报告详情
连林江—构建现代分析应用的实时数据仓库
信息技术
2023-08-08
2023产业数据价值化峰会暨数栖大会
罗鑫涛Robin
SelectDB实时数据仓库解决方案总结
01 实时分析即未来
现代化分析应用
:实时分析是未来趋势,主要应用场景包括在线报表与决策(如广告营销、保险客户分析、物流看板、交易查询)、交互式数据探索分析、增量ELT数据处理。
核心挑战
:高并发(>1 KQPS)、低延迟(毫秒级)、高可用性需求。
02 新一代实时数据仓库
三大特征
:多云原生、开源开放、实时统一。
技术优势
:支持实时数据查询与统一处理各类数据(结构化、半结构化、文本),兼容大数据生态(MySQL协议、S3、Kafka、Flink等)。
商业化产品
:SelectDB提供企业级服务(自管理私有化部署和全托管公有云服务)。
03 SelectDB技术领先性
性能表现
:2022年10月登顶Clickbench全球分析型数据库评测榜单,性能全球第一(Cold Run第一,Hot Run第二)。
国产化优势
:中国信通院“可信数据库”认证,多项国产化兼容认证(信创、等保三级)。
04 产品特色
数据集成
:支持S3、HDFS、数据湖(Iceberg/Hudi/Hive)、数据库(MySQL/Oracle/ES)等。
实时存储模型
:实时追加、更新、删除,支持半结构化数据(Array/Map/JSON)和Schema evolution。
强一致性物化视图
:支持预聚合视图、行列混存(即将支持)、Projection。
索引能力
:跳数索引(Bloomfilter/Min/Max)、点查索引(Prefix/Inverted)。
负载管理
:工作负载隔离、异常查询Kill机制。
性能指标
:高并发(1K–10W QPS)、低延迟(毫秒/秒级)、高性能(秒/分钟级)、大查询(中间结果落盘)。
易用性
:兼容MySQL协议,原生WebUI。
05 四大应用场景解决方案
实时报表与多维分析
:替代Spark/Hive/Presto等,支持业务数据近实时导入。
数据联邦与查询加速
:通过Multi-Catalog机制直接查询外部存储,替代Spark/Hive等。
日志存储与分析
:替代Elasticsearch/Loki,低成本高性能日志检索。
用户画像与行为分析
:替代Elasticsearch/Spark,构建用户数据平台进行行为分析。
你可能感兴趣
基于云原生消息系统构建实时数据仓库_刘德志
信息技术
ArchSummit北京2022|全球架构师峰会
2022-11-02
1-2 基于 Apache Doris 构建实时统一的现代数据分析平台
信息技术
DataFunSummit2022:现代数据栈技术峰会
2022-11-02
2019 数据驱动大会 基于 Impala 构建实时用户分析引擎
信息技术
神策数据
2019-11-29
基于 Impala 构建实时用户行为分析引擎
信息技术
神策数据
2018-01-01
徐榜江 (雪尽) - FlinkCDC如何加速海量数据的实时集成
信息技术
DataFunSummit2022:大数据计算架构峰会
2022-05-19
6-3 网易 Arctic:基于 Apache Iceberg 构建的实时湖仓一体系统
信息技术
DataFunSummit2022:多维分析架构峰会
2022-07-18
构建针对Intel多核处理器优化的实时航空电子系统
风河
2022-07-01
分析型数据仓库中读写分离的实现
信息技术
神策数据
2018-01-01
4-4 Iceberg 在微视实时场景的应用
文化传媒
DataFunSummit2022:大数据存储架构峰会
2022-07-19
驾驭实时支付的下一波应用浪潮
信息技术
万事达卡
2025-06-27