现代机器学习：方法与实践 课件 第11章 深度学习前沿架构：从Transformer到图神经网络.pptx

深度学习前沿架构从Transformer到图神经网络

课程目录01Transformer模型?从Seq2Seq到Transformer的演进

?核心机制：自注意力与多头注意力

?编码器与解码器的结构深度解析

?实践：BERT与GPT模型的应用与微调02图神经网络(GNN)?图数据的非欧几里得特性与挑战

?谱方法：图卷积网络(GCN)的数学原理

?空间方法：GraphSAGE与图注意力机制

?实践：基于Cora数据集的节点分类实战03图Transformer?Transformer与GNN的融合范式与优势

?核心思想：图结构感知的注意力机制

?经典模型：Graphorme