ETH-X Scale Up 互联协议白皮书 V1.0

版权声明 ODCC（开放数据中心委员会）发布的各项成果，受《著作权法》保护，编制单位共同享有著作权。 转载、摘编或利用其它方式使用ODCC成果中的文字或者观点的，应注明来源：“开放数据中心委员会ODCC”。 对于未经著作权人书面同意而实施的剽窃、复制、修改、销售、改编、汇编和翻译出版等侵权行为，ODCC及有关单位将追究其法律责任，感谢各单位的配合与支持。 编写团队 项目经理：张潍丰腾讯科技(深圳)有限公司工作组长：何泽坤腾讯科技(深圳)有限公司贡献专家：张潍丰腾讯科技(深圳)有限公司尚浩然腾讯科技(深圳)有限公司，清华大学夏寅賁腾讯科技(深圳)有限公司尹首一清华大学胡杨清华大学李兆石沐曦宋楠合见工业软件集团陈聪合见工业软件集团姚松合见工业软件集团于彬合见工业软件集团杨凯合见工业软件集团王建国上海燧原科技股份有限公司周永财上海燧原科技股份有限公司何宗应博通周大伟博通刘婷婷博通祝俊东奇异摩尔(衢州)集成电路设计有限公司朱琛奇异摩尔(衢州)集成电路设计有限公司陈刚云合智网(上海)技术有限公司蔡烽云合智网(上海)技术有限公司崔秀梅深圳云豹智能有限公司 韦奋深圳云豹智能有限公司王力苏州盛科通信股份有限公司余金清中兴通讯股份有限公司闫盛男中兴通讯股份有限公司杨茂彬中兴通讯股份有限公司陈川中兴通讯股份有限公司李扬中兴通讯股份有限公司孙聪中国信息通信研究院高威中国信息通信研究院 目录 一、范围.....................................................................................................................1二、术语和缩略语.....................................................................................................1三、ScaleUp互联需求..............................................................................................3(一)ScaleUp互联目标......................................................................................3(二)ScaleUp互联拓扑......................................................................................4(三)应用场景与语义需求.................................................................................7(四)ScaleUp功能需求概览............................................................................12(五)IOD模块基础功能需求...........................................................................13(六)AXI事务代理...........................................................................................16(七)ScaleUp内存模型....................................................................................17(八)专用的ScaleUp拷贝引擎......................................................................27(九)未来需求探讨：ScaleUp和ScaleOut融合..........................................29(十)未来需求探讨：GNAI统一编程接口....................................................30四、ETH-X协议栈总体概览..................................................................................31(一)整体概览...................................................................................................31(二)ETH-X软硬件交互界面..........................................................................31(三)ETH-X事务层：GPU-GPU访存协议....................................................32(四)ETH-X数据链路层：GPU-Switch互通协议.........................................34(五)ETH-X物理层..........................................................................................34(六)Die-to-Die互联：IO芯片与计算芯片的交互界面................................35五、事务层：GPU-GPU访存协议.........................................................................35(一)PAXI系统组件.........................................................................................35(二)AXI访存协议...........................................................................................36(三)PAXI（Peer-to-PeerAXI）特性概览......................................................37(四)PAXI事务层工作流程.............................................................................38(五)PAXI对上层接口的信号列表.................................................................40(六)PAXI网络地址转译.................................................................................47(七)TLFlit与PAXIMACPacket封装方式..................................................49 (八)PAXI流量控制.........................................................................................56(九)PAXI事务顺序.........................................................................................58(十)与MACLayer的接口定义......................................................................58六、数据链路层：GPU-Switch互通协议..............................................................59(一)转发效率优化：ETH-XPRI帧格式.......................................................59(二)可靠性增强：L2LLR（链路层重传机制）..........................................64(三)流控能力增强：CBFC.............................................................................70(四)基础流控能力：PFC................................................................................82(五)负载均衡技术：ECMP............................................................................83(六)调度机制：QoS........................................................................................83七、物理层...............................................................................................................84(一)物理层介质...............................................................................................84(二)物理层接口...............................................................................................85(三)MAC扩展：前导码.................................................................................86(四)PCS扩展：ControlOrderSet（CtlOS）................................................86八、D2D互联：计算DIE与IODIE的互联能力................................................87(一)基于IO芯粒方案的优势.........................................................................87(二)UCIe技术.................................................................................................88(三)Protocol适配............................................................................................90(四)IO