金融行业数据中心的在线迁移-陈晓宇

数据中心在线迁移总结

一、数据中心迁移背景

• 迁移原因：降本增效、网络架构优化。
• 不直接上云原因：金融行业特殊性，监管要求，业务连续性需求。
• 迁移挑战：资源紧张（资源华容道）、确保在线业务不受影响、涉及面广。

二、搬迁前准备

• 资源梳理：应用调用关系梳理（有向无环图）、防火墙规则梳理、历史遗留资源（数据、容器、域名）清理、域名整改、出口IP三方白名单添加、三方专线。
• 迁移准备：准备迁移备机、精确到设备的搬迁时间、制定每种中间件迁移方案、与研发团队沟通搬迁计划。
• 工具：宜信容器云平台（集成资源管理、DNS、Nginx、CICD、中间件部署、监控告警）。

三、具体搬迁方案

• 容器在线迁移：Deployment、Service、Configmap、PV/PVC迁移，Nginx混跑时服务变更处理。
• 容器网络：从flannel到calico，Calico rr模式解决新老机房网络打通。
• DNS迁移：本地化解析，先迁还是后迁需根据业务需求决定。
• Nginx迁移：客户端和服务端配置同步，批量域名替换。
• 数据库中间件：主从切换+域名切换，确保读写分离。
• 分布式中间件：添加节点+域名切换，注意client与ZooKeeper server的TCP长连接。
• 对象存储迁移：写操作到新集群，读操作优先新集群，流拷贝+多线程加速。
• 大数据集群迁移：根据容量分批次迁移（小容量、大容量）。

四、遇到问题和经验总结

• 问题：大数据延迟、网关切换问题、裸光延迟、高IO应用迁移、防火墙性能、生成树成环、网络错误包、Redis哨兵只读、谨慎合并数据库、虚拟机遗留系统迁移。
• 解决方案：裸光迁移HTTP请求、升级jedis版本、网络二层打通固定IP/MAC、定时脚本释放Nginx长链接。
• 经验总结：完善基础设施是长期积累、云原生统一规范加速迁移、备用裸光必要性、不确定防火墙规则先放开、系统分级和故障优先级处理。

五、下阶段数据中心建设规划

• 宜信私有云平台：容器云进阶到私有云，统一中间件管理，资源监控告警，多云管理。
• 混合云：金融行业SLA要求驱动，实施步骤包括专线拉通、数据备份、测试部署、灰度发布、双活、故障切换。