2026年人工智能测试试题及答案
一、单项选择题(每题4分,共12分)
1.当前主流大语言模型采用的Transformer架构中,以下哪项改进是2024-2025年行业落地最广泛的效率优化方案?
A.完全自注意力B.滑动窗口注意力+GQA分组查询注意力C.卷积替换注意力D.递归注意力
答案:B
详细解析:2024年后,为了兼顾百万级长上下文处理能力和推理训练效率,滑动窗口注意力将注意力计算限制在固定大小的窗口内,把长序列的时间复杂度从O(n2)降到O(n),GQA将多个注意力头共享键值投影,在几乎不损失模型效果的前提下降低显存占用30%以上,二者结合成为当前主流大模型落地的标准效
原创力文档

文档评论(0)