TEZ引擎+LAKEHOUSE 金融级数据中台重构创新实践

TEZ引擎+LAKEHOUSE 金融级数据中台重构创新实践 郁敏总经理助理常熟农商银行统计与数据资产部 数据中台演进之路 数据的十年演进之路 数据中台 数据中台雏形 数据仓库 •面向主题•数据ETL•决策分析 第三代数据中台系统架构——湖仓一体 变小了，也变强了 +Snappy Tez新引擎积累30参数项调优： 跑批时效提升2.4倍老平台作业跑批总累计耗时2311小时新平台跑批总累计耗时963小时主干链路跑批提升2.3倍老平台主干链路作业跑批总耗时161小时新平台主干链路跑批总耗时68小时 存储节省：服务器&软件授权节省28例，总预算节省19.5%老平台3.64PB，新平台2.08PB，节省1.56PB 在业务上释放数据价值 效能革命：新数据中台赋能全栈业务与研发效率倍增 新数据中台上线不仅是技术升级，更是业务效能的革命。关键业务报表出数时间最高提速649，绩效研发效率提升400%，为敏捷营销和快速决策提供了“小时级” 数据支撑。 跑批效率，绿皮火车换乘高铁 新平台实时风控提效，小微展业放开手脚 实时风控独立集群部署，支撑授信、小微、零售、村镇等业务风险管理。 应用场景综合化：目前信贷侧已形成71套策略，合计4400+条规则。 小微市民贷审批策略，含12个规则集，平均每个规则集含86条规则。策略自3月上线以来已累计发布了7个版本，中台可支撑更高的变更效率 投管行上线集中审批辅助模型，将传统经验式风控转变为“规则+经验”相结合，形成强弱规则共68条，模型跑批25万户，可覆盖村镇客户 使用该中台方案，我行小微贷款用信余额711.5亿，不良率0.75%，同等规模行业第一、上市银行第二，审批时效由30分钟缩短至平均10秒 使用该中台方案，日均监测交易250余万次，识别风险8000余次，我行涉案账户识别覆盖率超80%，可识别的覆盖面更广 实时服务 面向对响应时长要求较高（毫秒级）的场景，如：手机银行反欺诈。-优点：响应快，平均150ms，99分位200ms 批量服务 面向数据量大且可接受小时/天级时效的场景，如：贷后预警。-优点：支持批量发起；定时执行-缺点：响应速度很慢；仅在系统闲时执行 数据应用从规模增长迈向效率倍增 统筹规划“游离小数仓” 与小微部、零售部协作，将业务线自建的数据展示页面，统一嵌入到飞燕数海、管理驾驶舱将自建的、已稳定的业务统计指标，统一纳为标准化指标管理联动科技部，对小数仓上的数据做脱敏，守牢安全线 专项驻点集中化 对于数据需求较多的部门，采取上门服务或专项支持，集中资源处置，如面向零售部，提供旺季期间的驻点服务；对接运管部，分析数据需求特点，针对性形成数据集上架到BI，实现减少20%工单量 监管报送赋能 BI降低数据获取门槛，数据开放从此游刃有余 集团旗下设有投资管理行，负责管理我行作为主办行发起、或者收购的32家村镇银行，村镇银行普遍存在金融科技支撑不足的情况。通过BI应用，将数据中台上沉淀的数据融合层80多张模型表、领域集市层的40多张考核明细表开放给村镇银行的数据使用者，使投管行能根据自身需要搭建出数据统计和业务考核方案，而被管理的村镇银行也能落地适用于自身的二级考核方案 AI赋能，数据平民化，重塑全员数据体验 打造“AI问数”系列产品，将数据服务从“专业大餐”变为“便捷快餐”。此举大幅降低数据获取门槛，每分钟都有交互发生，真正让数据成为一线员工随手可用的工具。 数中见义，用数据成就美好