爱奇艺数据链路治理-DataFun

演讲人：彭涛爱奇艺研究员 目录Contents 离线链路治理 问题和目标 实时链路治理 探索 01问题和目标 问题和目标 数据链路长影响业务多涉及团队广 离线链路 实时链路 1.下游节点无法有效地获知故障源头2.故障节点无法有效评估影响的范围3.数据修复耗时耗力 02离线链路治理 离线链路治理 任务稳定性–双集群HA 数据监控 离线数据血缘 数据链路 03实时链路治理 实时链路治理 实时链路治理–链路监控 实时链路大盘 04探索 探索 •数据异常智能归因•根据专家系统自动检测异常的原因•字段血缘•精确评估数据对下游的影响范围•流程管控•阻断任务•自动通知下游 字段血缘 探索–智能归因 —THANKS— 感谢您的观看