征求意见稿-《车载智能座舱大模型交互意图理解及执行能力测试评价方法》.docx

1

T/CSAE85—2024

车载智能座舱大模型交互意图理解与执行能力测试评价方法

1范围

本文件规定了汽车智能座舱大模型人机交互意图理解及执行能力的评价指标体系、要求及测试方法。

本文件适用于汽车智能座舱领域大语言模型在产品定义、开发、验收及测试阶段的能力评价。评价对象包括：

a）大语言模型对用户交互意图的理解能力水平；

b）大语言模型对用户下发指令的执行能力水平，涵盖执行的质量与效率。

2规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单