刘钊毅中科软科技资深数据架构师 智能风控平台01数据架构演进02实践场景03总结与展望04 目录 01智能风控平台 「中科软简介」 27+年行业积累 18000+行业应用专业化人才 •7000+专注寿险、6000+专注财险、5000+专注公共卫生医疗及政府等行业;•涵盖众多行业的应用软件产品、开发服务、系统集成等;•公司拥有18000+人才,技术人员占比89%,82%+本科以上;•研发能力:与中科院软件所成立“行业信息化联合实验室”、“人工智能实验室”、“区块链实验室”;•在保险软件厂商中综合竞争力排名第一,并保持连续十年排名第一;•国家规划布局高新技术企业,国家鼓励的重点软件企业、软件百强企业。 •公司成立时间:1996.5.30•注册资本:59,360万•国有控股:中科院软件研究所、海淀国有资产投资经营公司•2006年1月23日在深圳新三板上市•2019年9月9日上交所上市,股票代码603927•2023年实现营业收入约65.03亿,实现净利润6.55亿,同比增长2.59% 「中科软简介-市场占有率」 自2011年起在IT解决方案市场竞争分析中连续数年占据领导者地位 「保险行业的知识体系框架-风险管理域」 评估层 约束层 「保险欺诈给各国保险行业造成损失估计」 保险欺诈行为造成的损失是非常惊人的;近年来通过强化组织并不断提升技术含量危害日益加剧; 「保险风控业务方案的发展」 第三方行业大数据服务接入[行协、央行、司法、交管、医院、运营商、二手车、UBI等] 「原数据架构-Hadoop生态」 「升级后的数据架构-Doris生态」 「大数据技术开发管理平台的建立」 「技术组件托管能力」 「平台快速开发能力-数据库」 1、支持常用的各类数据库、hadoop系统,可以通过配置数据源新增对于目标数据库系统的支持。 「平台快速开发能力-ETL」 「平台快速开发能力-机器学习」 「平台智能调度能力」 3、job运行详细日志查看,支持问题快速定位等能力。 「平台运维监控能力」 「对服务高可用、数据高可靠的保障能力提升」 数据高可靠 服务高可用 元数据、数据多副本存储,宕机数据自动修复 FE和BE的多节点部署,宕机容错 •完善的RBAC访问控制•数据细粒度权限:库、表、行、列•支持SSL、TLS安全连接和数据传输 •FE分为Leader,Follower和Observer三种角色•默认一个集群,只能有一个Leader,可以有多个Follower和Observer。•Leader和Follower组成一个Paxos选举组,如果Leader宕机,则剩下的Follower会自动选出新的Leader,保证写入高可用。•Observer同步Leader的数据,但是不参加选举。如果只部署一个FE,则FE默认就是Leader。•第一个启动的FE自动成为Leader,上面输出可以看到IsMaster:true。在此基础上,可以添加若干Follower和Observer。 •备份/恢复:支持全表或分区表的备份;•备份方式:mysqldump备份、Hadoop备份等•数据恢复:Doris支持将当前数据以文件的形式,通过broker备份到远端存储系统中。之后可以通过恢复命令,从远端存储系统中将数据恢复到任意Doris集群。通过这个功能,Doris可以支持将数据定期的快照备份,也可以在不同集群间进行数据迁移。 ThanksforWatching!