新 SNIA 计算存储技术工作组的更新... 计算机体系结构的新范式

计算存储技术工作组 (TWG) 核心观点与进展

背景

• 发起与组织：由 SNIA 计算存储技术工作组（Scott Shadley、Tom Friend 等）主导，旨在推动计算存储技术的标准化与落地。
• 技术起源：始于 2018 年 FMS 会议上关于“计算存储”的首次讨论，涵盖初创企业与成熟硬件，探讨将计算引入存储的可能性。

问题与挑战

• 传统存储架构瓶颈：随着数据密集型应用（如高速存储部署）的普及，传统架构（CPU-内存-存储分离）导致 CPU、内存和存储瓶颈，无法有效卸载计算任务，且性能与容量扩展性不足。
• 架构示例：传统架构中，数据需频繁在 CPU、内存和存储间传输，形成瓶颈；而计算存储架构通过在存储层引入计算能力，实现数据驱动计算。

解决方案

• 核心概念：
  • 计算存储驱动器 (CSD)：提供持久数据存储和计算服务的组件。
  • 计算存储阵列 (CSA)：由 CSD、计算存储处理器 (CSP) 和存储设备组成，结合控制软件。
  • 计算存储处理器 (CSP)：为存储系统提供计算服务但不提供持久存储。
• 优势：
  • 缓解 CPU、内存和存储瓶颈。
  • 实现在线计算卸载，提升性能与容量扩展性。
  • 通过分布式处理，减少 I/O 总线流量。

行业合作与标准化

• 标准化计划：
  • SNIA 作为试验场，推动计算存储标准化工作。
  • 计划分拆接口、协议等给 Scala.org、DMTF、NVMe 等行业团体。
• 合作伙伴：已有 24+ 公司参与，共同定义高级开放式架构和灵活框架。
• 行动呼吁：
  • SNIA 合作伙伴需提供大数据问题场景，帮助完善架构。
  • 软件设计需行业协作，共同推动框架落地。

关键数据与结论

• 技术趋势：存储容量持续增长，但体系结构长期未变；计算存储是解决瓶颈的关键方向。
• 标准化进展：已形成行业共识，SNIA 将主导标准化工作，推动计算存储成为行业标准。