零售大数据应用分享报告

平安银行大数据在零售应用实践分享

技术平台 & 数据中台

• 交互式查询引擎: KDC/Kerberos, YARN, Ganglia, ZooKeeper, HDFS
• 可视化界面: 调度平台 Z+, 指标系统, 监控工具 (Nagios, Grafana, Prometheus)
• 实时计算平台: Spark Streaming, Flink
• 离线计算平台: MR, Hive, Spark, Presto, NoSQL 存储 (Elastic Search, HBase, MongoDB)
• AI 云平台: Kubernetes + Docker, CPU, FPGA, GPU, 存储 (块存储, 对象存储, 分布式文件系统)

智能推荐 & 智能营销

• 智能推荐系统架构:

  • 数据 & 模型: 数据仓库, 商品数据, 账户数据, 日志数据
  • 特征中心: 在线/离线模型训练, 流计算, 批计算
  • 智能引擎: 内容召回, 人群识别, 规则过滤, 打分排序, AB 实验
  • 算法库: MAB, LR, GBDT, PMML 模型加载
  • 智能推荐引擎: 场景追踪, 实时召回, 实时存储

• 智能营销系统架构:

  • 配置中心: 查询服务, 数据查询, 运营规则
  • 营销系统: 销售线索, 标签系统, 事件中心, 活动集市
  • 查询关联: 配置保存, 规则缓存, 前端页面

经营分析 & 用户行为分析

• 经营分析:

  • 将数据开发工程师培养成算法工程师/数据分析师
  • BI 开发过程中积累业务知识
  • 建立运营分析框架
  • 完善的数据分析工具体系

• 用户行为分析:

  • 基于埋点系统的用户行为分析平台
  • 功能模块: 数据报告, 应用概览, 访问分析, 投屏可视化, 漏斗分析, 行为轨迹, 数据查询
  • 关键功能: 漏斗分析, 路径分析

数据治理架构

• 元数据管理中心: 场景化搜索, 数据地图, 源业务数据字典检索
• 数据标准中心: 字段标准管理, 码值标准管理, 字典管理
• 质量监控中心: 数据质量问题管理, 数据质量监控管理, 监控规则管理, 告警管理
• 数据建模中心: 统一建模, 业务源系统建模能力, 模型管理
• 资产分析中心: 多维度展现数据资产总览、价值、时效、访问情况等
• 数据安全中心: 大数据安全分级管理, 安全脱敏, 安全加密, 安全监控, 权限管理