B站-高隆-数据治理运营框架 -- 实现亿级费用减省的操作系
AI智能总结
讲师简介 “表哥DAMAB站数据成本治理数据质量 高隆 目录 分析工具：DAMA-Bok 案例1--2022-05-11存储水位风险 •虚拟组织•嵌入治理•元数据管理 案例2--2023-10-30数据丢失复盘 •质量运营•质量的需求与满足•数据治理中的风险 数据管理知识体系DAMA-DMBOK DAMA成立于1980年，是一个全球性数据管理和业务专业志愿人士组成的非营利协会，致力于数据管理的研究和实践 *左上图是买书的时候送的鼠标垫 车轮图：11个知识领域 26边形图：每个知识领域的7件事情 语境关系图：每个知识领域都可以展开成具体的活动、方法、目标、指标 12原则：采取行动和判断时的依据 案例1--2022-05-11存储水位风险 案例背景 名词解释： •存储水位：HDFS集群存储•部门数管：部门的“CDO”•Quota：部门预算资源分配•A级数据：多为跨部门使用数据•Trash数据：一般存7日 案例背景 问题与挑战 破题思路 破题思路–变更方案 Part1：数委会--活动 Part2：嵌入治理 Quota–old (till 2022.H1) Quota–v1.0 Part3：元数据的应用--资产账单 Part3：元数据的管理--元模型 Part3：元数据的管理--元数据的指标与标签 *关于“指标标签”与“道行数知名” 案例背景（2线6问） 数据质量监控 从CS到TODO 事前分析问题 事后沉淀基建 事中处理问题 需要观察发布的治理项目是否有在被顺利执行需要观察问题新增速度是否远远大于处理速度需要评估使用人力参与数治理的工作是否合理 通过各种渠道收集问题通过复盘寻找问题处理方法通过治理策略、开发基建控制问题的影响 开发元数据增强数据管理能力开发治理策略提高问题处理效率开发基建降低问题产生的几率 TakeAway 数据治理运营框架实施数据治理需要操作系统 微信官方公众号：哔哩哔哩技术关 注 查 看 更 多B站 技 术 分 享 微 信 官 方 公 众 号 ： 壹 佰 案 例关 注 查 看 更 多 年 度 实 践 案 例
