2025年Transformer模型应用题库.docVIP

2025年Transformer模型应用题库

一、单项选择题（每题1分，共30题）

1.在Transformer模型中，用于捕捉序列中长距离依赖关系的组件是？

A.输入层

B.注意力机制

C.隐藏层

D.输出层

2.Transformer模型的核心思想是？

A.隐马尔可夫模型

B.卷积神经网络

C.自注意力机制

D.递归神经网络

3.以下哪个不是Transformer模型的自注意力机制的计算步骤？

A.计算query、key、value的线性投影

B.计算query和key的相似度

C.对相似度进行softmax归一化

D.使用全连接层进行进一步处理

4.在Transformer模型中，多头注