01目录 CONTENT|业务场景架构演变收益现状未来展望030204
业务场景01|
业务场景-企业介绍|同程数科为同程集团旗下旅游产业金融科技服务平台,成立于2015年,累计服务用户超千万,业务涵盖产业金融、消费金融、金融科技、数字科技等板块。
业务场景-业务需求|基于Doris实现看板类(实时驾驶舱、T+1业务看板)、预警类(实时业务流程预警)、分析类(数据查询分析、临时取数、实时用户标签查询)、财务类(财务清算对账、支付对账)需求。
架构演变02|
架构演变-架构1.0|采用CDH构建,优点是快速集成和可视化开发,但存在组件过多、维护复杂、聚合查询能力不足、资源竞争等问题。
架构演变-架构2.0|选型Doris的原因包括丰富的数据接入能力、MySQL协议兼容性、MPP并行计算、易上手等。Doris架构特点为独立于Hadoop、分为FE/BE两层、运维简便、高可用、可扩展性强。
Doris实时系统架构|数据源包括产业金融、消费金融、风控、日志等,通过Canal、Kafka等采集,经Doris处理后输出DWD/DWS/ADS层,支持实时看板、挖掘分析、数据服务等应用。
Doris新数仓特点|数据导入方式简便(routine load、broker load、insert into),模型优化(unique、aggregate),查询效率高(MySQL协议+物化视图),部署运维成本低。
如何更友好的使用Doris|关注快速开发、调度管理、数据查询、集群管理,宗旨是高效率、高质量、高稳定。
数据平台-Doris开发|通过快速构建代码实现routine load、broker load任务开发。
数据平台-Doris调度与监控|支持任务调度、失败预警、持续监控。
数据平台-Doris数据查询|自研查询页面集成Doris Help帮助功能。
数据平台-Doris集群监控|监控FE/BE/BROKER节点异常并自动提醒。
收益现状03|
新架构收益|基于Doris架构提升数据接入效率(3-5分钟/表)、数据开发效率(unique/aggregate模型加速ETL)、数据查询效率(物化视图+优化机制)、数据报表响应速度(秒级/毫秒级)、环境维护成本(简化链路、降低运维成本)。
未来展望04|
未来展望|规划引入Doris Manager、实现Flink CDC数据接入、升级集群新特性、强化指标管理体系和数据质量监控体系。