不使用 FP64 算术的 DGEMM – 使用 FP64 仿真和 FP8 张量核心与 Ozaki 方案.pdfVIP

不使用FP64算术的DGEMM–使用FP64仿

真和FP8张量核心与Ozaki方案

DaichiMukunoki

mukunoki@cc.nagoya-u.ac.jp

InformationTechnologyCenter,NagoyaUniversity

Nagoya,Aichi,Japan

摘要FP16的实现。我们通过在NVIDIABlackwell架构GPU

上的性能评估展示了这些方法的有效性。

随着对AI计算需求的快速增长，更多硬件被开发出来

本以高效执行此类工作负载所需的低精度矩阵乘法。然

译而，由于准确性要求，这些操作通常不直接适用于科Keyword