面向大模型训练的异构AI芯片架构演进路径.docxVIP

面向大模型训练的异构AI芯片架构演进路径

目录

内容简述．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．2

异构AI芯片技术基础．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

2.1架构分类方法．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．3

2.2多核并行机制．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．14

2.3内存层级结构．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．16

聚焦高性能计算．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．18

3.1GPU加速演进历程．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．18

3.2TPU专用加速探索．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．21

3.3中型AI处理器发展．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．24

融合存储与传输．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．27

4.1高带宽内存技术．．．．．．．．．．．．．．．．．．．．．．．．．．．．．．