12-金融行业分布式存储高可用实践分享-张慈湑

云无边界架构未来拥抱开源|拥抱本地化|拥抱数字创新

01 总体规划

• 项目概述：为解决海量非结构化影像数据存储、管理和应用问题，并应对未来PB级数据规模，重庆银行科技部选择对象存储作为影像平台后端存储，实现数据迁移和技术准备。
• 业务需求调研：非结构化数据持续增长，需新方式存储和保护；数据日趋分散，需多站点解决方案；混合云提供成本和性能平衡选项。
• 实施规划：包括业务需求调研、架构调研、技术方案、方案验证测试、业务上线和正式运行。

02 对象存储介绍

• 存储类型对比：对象存储与块存储、文件存储在架构、交易单位、更新方式、访问协议、优势和适用场景上存在差异。
• 对象存储优势：高可靠、高性能、高安全、易管理。
• 解决方案对比：传统解决方案需1.7倍冗余，对象存储通过算法实现1.2:1副本比例，冗余1.7倍，节省空间和成本。
• 典型架构：基于浏览器应用、REST/HTTP协议，支持横向扩展、分布式架构，跨地域多中心均衡负载，互联网友好，可编程API接口。
• 使用场景：适用于移动APP数据、影像平台、后督系统、应用日志、企业网盘、OA文档、知识库、备份归档等，文件类型多样，大小不一，数量众多且保存时间长。

03 我行架构设计

• 整体架构概览：重庆银行已完成同城双活数据中心建设，实现国内银行业首个双中心双活部署的对象存储体系，承载影像平台数据。
• DNS组网概览：跨中心DNS集群，实现上丁和水土两个数据中心的应用解析访问。
• 单数据中心内架构图：F5 LTM作为ECS Node集群网关，实现业务端口负载均衡。
• 单数据中心流程图：用户请求数据写入流程，数据在本地ECS和远程ECS间复制，实现高可用。
• 应用多站点访问：通过DNS负载均衡和ECS负载均衡，实现应用服务器跨站点访问和数据一致性。

04 项目意义

• 首个双中心双活部署的对象存储体系：统一对外使用ecs.cqcbank.com服务域名，供应用调用rest-API调用S3服务，与传统存储相比，调用模式与公有云存储一致，灵活易用。