OceanStor A800 V700R001C30 产品技术白皮书
简介
随着AI技术的进步,大模型所需的数据量和参数规模呈指数级增长,对存储系统提出高性能、大规模共享、高可靠性的诉求。OceanStor A800 V700R001C30 是华为推出的全新一代AI存储系统,具备以下技术特性:
- 新一代定制硬件: 高性能控制器、PCIe接口模块和盘模块;全共享硬件架构,控制器、接口、盘等组件全互联,成对配置;软硬件一体预安装出厂,简化部署。
- 新一代SmartMatrix(4.0)可靠架构: 资源全均衡,故障0感知,规划0忧虑,支持按需在线扩容。
- OceanFS分布式并行文件系统: 大规模高性能文件系统,支持EB级容量和百TB带宽、数十亿OPS性能能力;跨协议共享能力,支持不同业务阶段的不同应用系统、用户系统的生态访问;多文件系统能力,支持多用户/用户组、域等用户的QoS和quota管理。
- FlashLink®原生全闪存架构: OPS和带宽俱佳,支持大块顺序写、高效RAID/分布式EC能力;智能众核技术,多流分区技术、端到端I/O优先级、数控分离技术,保障存储系统稳定低时延和高IOPS。
- 原生AI存储架构: 以存强算,以存代算,以存补算,为AI的系统提供存储底座,同时数据使能的技术栈让AI运行更流畅。
硬件架构
OceanStor A800采用乐高组合架构,以FRU为基础组件,以控制框为组合载体构建设备的基本单元。多框之间采用高速互联架构构建存储集群,框内走正交直插fullmesh共享互联组网,框间采用双交换平面全互联方式组网。控制框采用正交无背板的前后对插互联架构设计,无需背板,简洁、安全、可靠。
软件架构
OceanStor A800系统软件由主机客户端软件、存储业务服务软件和存储管理软件三大部分组成。存储业务服务软件采用软硬件一体的方式发布,支持软件在线升级;主机客户端软件和存储管理软件采用独立软件组件包方式发布,支持客户现场选择合适的服务器硬件进行安装部署。
- SmartMatrix4.0集群架构: 分层集中管理模型,支持设备和业务状态的实时监控和就近容错处理。
- OceanFS 分布式并行文件系统架构: Active-Active负载均衡,全局动态负载均衡、全局缓存和高性能缓存;跨协议共享能力,支持NFS、NFS+、DataTurbo、S3等协议;高性能客户端,提供NFS/NFS+客户端、DataTurbo客户端。
- FlashLink® 原生全闪存架构: 智能众核技术、端到端I/O优先级、大块顺序写、多流分区技术、数控分离技术,保障极致可靠性和性能。
增值特性
- SmartQoS: 提升空间使用效率和容量隔离,支持上限流控和下限保障,提供分层管理、策略分配等功能。
- SmartQuota: 配额管理,限制指定使用者可使用的存储空间,支持容量软配额、容量硬配额、文件软配额、文件硬配额。
- SmartMulti-tenant: 多租户特性,将物理存储系统分为多个虚拟存储系统,实现业务隔离、网络隔离。
- Unified Cache: 推理加速,支持KV Cache数据的结构化存储与高效索引,支持KV Cache数据的分层与批量写入机制,支持多模型、多Session的KV Cache隔离与命名空间管理。
- Hyper系列特性: 快照(HyperSnap)、WORM(HyperLock)、阵列加密(HyperEncryption)。
- Cloud系列特性: Cloud Vxlan。
系统可靠性设计
- 硬件可靠性: 器件可靠性设计、控制器可靠性设计、整机可靠性设计。
- 数据可靠性设计: 缓存数据可靠性保证、持久数据可靠性保证、I/O路径数据可靠性保证。
- 业务可用性设计: 接口模块/链路冗余保护、客户端多路径保护、控制器冗余保护、存储介质冗余保护。
系统性能设计
- 前端网络优化: ROCE链路、DTOE技术、多路径全局负载均衡。
- CPU计算优化: 智能众核技术、动态负载均衡。
- 后端网络优化: 多流技术、ROW满分条写、SSD读优先。
- 支持前端/ScaleOut网络合一: 高性能、低成本。
系统可服务性设计
- 系统管理: DeviceManager、CLI、Restful API、SNMP、SMIS等。
- 升级过程主机透明(NDU): 无需重启控制器的升级方式,升级过程中控制器不重启,主机链路不切换,业务基本无影响。
系统安全设计
- 软件完整性保护: 数字签名技术,保障软件包的完整性。
- 安全启动: 可信根RoT、两级数字签名、RSA 2048/4096算法。
- 加密盘数据加密(Data Encryption): SED加密盘和内置密管,支持数据静态加密。
绿色节能设计
- 高能效比的处理器
- 高效电源
- PID节能调速技术
- 错峰上电
- 节能认证
系统智能设计
- 智能存储: 智能读缓存,有效挖掘用户的数据访问模型,智能优化系统的I/O栈处理。
生态兼容性
- 数据面生态兼容性: 兼容业界主流主机操作系统、存储网络。
- 管控面生态兼容性: 支持业界主流网管协议和标准,支持主流网管软件。
更多参考信息
- 华为存储主页:https://info.support.huawei.com/storage
- 最佳实践案例:http://storage.huawei.com/index.html
- 官方网站:http://e.huawei.com/cn/products/cloud-computing-dc/storage
- 技术支持网站:http://support.huawei.com/enterprise/
- 售前问题网站:http://e.huawei.com/cn/how-to-buy/contact-us
- 当地办事处联系方式:http://e.huawei.com/cn/branch-office