- 1、本文档共17页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
AI 服务器前景广阔,接口芯片需求广泛
AIGC 大时代来临,ChatGPT 等大语言模型的推出,带动 AI 服务器需求量与日俱增。服务器行业由早期以传统服务器为主的市场格局,转变为传统服务器、云服务器、AI 服务器和边缘服务器四足鼎立。当下,AI 下游应用的持续火爆和算力要求的增加,AI 服务器需求与日俱增。据 TrendForce 数据,AI 服务器出货约 13 万台,占全球服务器出货约 1%,展望 2023年,Microsoft、Meta、Baidu 与 ByteDance 相继推出基于生成式 AI 衍生的产品服务而积极加单,预估 23 年 AI 服务器出货量年增率可望达 15.4%,且随着未来 ChatGPT 对 AI 服务器需求用量,预计 2023-2027 年 AI 服务器将以 12.2%年复合增速成长。
图1:2022-2027 年全球 AI 服务器出货量及增速
出货量(千台) yoy
250
200
150
100
50
0
2022 2023E 2024E 2025E 2026E 2027E
18%
16%
14%
12%
10%
8%
6%
4%
2%
0%
TrendForce,
接口芯片在 AI 服务器数据传输中至关重要,需求将伴随服务器市场增长。在 AI 服务器需求增长的同时,针对于服务器内部之间或与其他设备的数据的传输、控制和管理等接口功能的要求也随之逐渐增加。服务器的升级与需求量提升也会带动接口芯片的增长。接下来,本文将具体从服务器内部互联,服务器外部接口两方面来梳理接口芯片行业情况。
服务器内部:组件高速互联,接口芯片不可或缺
以DXG H100 服务器为例,拆解服务器内部高速互联架构
DGX H100 于 2022 年推出,是 NVIDIA 的 DGX 系统的最新迭代产品,也是 NVIDIA DGX SuperPOD 的基础。DXG 服务器配备 8 块 H100 GPU,6400亿个晶体管,在全新的 FP8 精度下 AI 性能比上一代高 6 倍,可提供 900GB/s 的带宽。DGX H100 服务器内部架构如下图所示:
图2:英伟达 DGX H100 服务器内部芯片互联架构图
NVDIA 官网,
在 DGX H100 服务器内部,蓝色方块为 IP 网卡,既可充当网卡又可发挥 PCIe Switch 扩展功能,成为 CPU 与 GPU(H100)之间互联的桥梁。其内部采用 PCle 5.0 标准。此外,CX7 以网卡芯片的形式做成 2 块板卡来插入服务器,每 4 个 CX7 芯片组成一块板卡并且对外输出 2 个 800G OSFP 光模块口。
而 GPU(H100)之间互联主要通过 NV Switch 芯片来实现。每个 DGX H100 内的一个 GPU 向外伸出 18 个 NVLink ,单链双向带宽为 50 GB/s,共计 18*50GB/s=900GB/s 双向带宽,拆分到 4 个板载的 NV Switch 上去,因而每个 NV Switch 对应 4-5 个OSFP 光模块(共计 18 个)。每个 OSFP 光模块采用 8 个光通道,每个通道的传输速率为 100Gbps,因此总速率高达 800Gbps,能够实现高速的数据传输。
CPU、GPU 等组件互联:PCIE Switch、Retimer 芯片
PCIe 技术不断升级,速率持续提升
PCIe Switch 即PCIe 开关或PCIe 交换机,主要作用是实现PCIe 设备互联, PCIe Switch 芯片与其设备的通信协议都是 PCIe。由于 PCIe 的链路通信是一种端对端的数据传输,因此需要Switch 提供扩展或聚合能力,从而允许更多的设备连接到一个 PCle 端口,以解决 PCIe 通道数量不够的问题。 目前 PCIe Switch 不仅已经被广泛应用在了传统存储系统中,而且在部分服务器平台中也逐渐普及,用于提高数据传输的速度。
PCIe 总线技术升级,PCIe Switch 每代速率提升。PCIe 总线是 PCI 总线的高速串行替代品。2001 年,Intel 公布取代 PCI 总线的第三代 I/O 技术—— “3GIO”,2002 年该项技术经过 PCI 特殊兴趣组织(PCI-SIG)审核后正式改名为“PCI Express”,标志着 PCIe 的诞生。2003 年,PCIe 1.0 正式发布,可支持每通道传输速率为 250MB/s,总传输速率为 2.5 GT/s。2007 年 PCI-SIG 宣布推出 PCI Express Base 2.0 规范。在 PCIe 1.0 的基础上将总传输速率提高了一倍,达到 5 GT/s,每通道传输速率从 250
您可能关注的文档
- REITs在二级市场价格波动受何影响.docx
- AMD,MI300在AI正面交锋英伟达,16年CPU突围成功能否复制.docx
- ChatGPT横空出世,大模型全面赋能,自动驾驶渐行渐近.docx
- ChatGPT开发商再获百亿美元融资,钠离子电池实装加速落地.docx
- AI音乐:打通技术新路径,大模型时代加速发展.docx
- Al应用端行业深度研究.docx
- AI行情回落,关注基本面优质个股.docx
- AI深度报告:向量数据库,AI时代的Killer App.docx
- AIGC深度报告:颠覆人机交互模式,内容生产进入新时代.docx
- AI教育商业化率先落地,Duolingo商业模式解析,期待AI教育多点开花.docx
文档评论(0)