面向大模型多智能体系统的多维评估方法.pdfVIP

－

２０２５０４指挥控制与仿真

４７（２）ＣｏｍｍａｎｄＣｏｎｔｒｏｌ＆Ｓｉｍｕｌａｔｉｏｎ１２１

引用格式：董之南，张勤学，胡进，等．面向大模型多智能体系统的多维评估方法［Ｊ］．指挥控制与仿真，２０２５，４７（２）：１２１⁃１３１．

ＤＯＮＧＺＮ，ＺＨＡＮＧＱＸ，ＨＵＪ，ｅｔａｌ．Ａｍｕｌｔｉ⁃ｄｉｍｅｎｓｉｏｎａｌｅｖａｌｕａｔｉｏｎｍｅｔｈｏｄｆｏｒｌａｒｇｅｌａｎｇｕａｇｅｍｏｄｅｌ⁃ｐｏｗｅｒｅｄｍｕｌｔｉ⁃ａｇｅｎｔｓｙｓｔｅｍｓ［Ｊ］．

ＣｏｍｍａｎｄＣｏｎｔｒｏｌ＆Ｓｉｍｕｌａｔｉｏｎ，２０２５，４７（２）：１２１⁃１３１．

面向大模型多智能体系统的多维评估方法

董之南，张勤学，胡进，仵志鹏，卢志龙

（中国航天科工集团八五一一研究所，江苏南京２１０００７）

摘要：大模型驱动的多智能体系统在增强人工智能水平方面具有巨大的潜力，为军事智能化提供了创新解决方

案。但是，目前的大模型驱动的多智能体系统能够独立完成任务目标的自主性受任务复杂程度的影响较大，且系统

处理结果与初始目标之间的一致性程度较差，有必要对大模型驱动的多智能体系统的自主性和一致性进行评估分

析。已有研究尚未对大模型多智能体系统的自主性和一致性水平进行全面评估。提出了一种多维评估方法，能够

分析提取大模型驱动的多智能体整体架构的自主性和一致性，得到系统的整体性能评估结果和具体改进方法。通

过对７个已有选定系统的实验分析，研究验证了多维评估方法在实际应用中的可行性。

关键词：大模型；多智能体；系统评估；多智能体协同；自主性

中图分类号：ＴＰ１８１：Ｅ９１９文献标志码：ＡＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１６７３⁃３８１９．２０２５．０２．０１６

Ａｍｕｌｔｉ⁃ｄｉｍｅｎｓｉｏｎａｌｅｖａｌｕａｔｉｏｎｍｅｔｈｏｄｆｏｒｌａｒｇｅｌａｎｇｕａｇｅ

ｍｏｄｅｌ⁃ｐｏｗｅｒｅｄｍｕｌｔｉ⁃ａｇｅｎｔｓｙｓｔｅｍｓ

ＤＯＮＧＺｈｉｎａｎ，ＺＨＡＮＧＱｉｎｘｕｅ，ＨＵＪｉｎ，ＷＵＺｈｉｐｅｎｇ，ＬＵＺｈｉｌｏｎｇ

（Ｎｏ．８５１１ＲｅｓｅａｒｃｈＩｎｓｔｉｔｕｔｅｏｆＣＡＳＩＣ，Ｎａｎｊｉｎｇ２１０００７，Ｃｈｉｎａ）

Ａｂｓｔｒａｃｔ：Ｔｈｅｍｕｌｔｉ⁃ａｇｅｎｔｓｙｓｔｅｍｄｒｉｖｅｎｂｙｌａｒｇｅｍｏｄｅｌｓｈａｓｇｒｅａｔｐｏｔｅｎｔｉａｌｉｎｅｎｈａｎｃｉｎｇｔｈｅｌｅｖｅｌｏｆａｒｔｉｆｉｃｉａｌｉｎｔｅｌｌｉｇｅｎｃｅ，

ｐｒｏｖｉｄｉｎｇｉｎｎｏｖａｔｉｖｅｓｏｌｕｔｉｏｎｓｆｏｒｍｉｌｉｔａｒｙｉｎｔｅｌｌｉｇｅｎｃｅ．Ｈｏｗｅｖｅｒ，ｔｈｅｄｅｇｒｅｅｏｆａｕｔｏｎｏｍｙｏｆｃｕｒｒｅｎｔｌａｒｇｅｍｏｄｅｌｄｒｉｖｅｎｍｕｌｔｉ⁃

ａｇｅｎｔｓｙｓｔｅｍｓｉｎｉｎｄｅｐｅｎｄｅｎｔｌｙｃｏｍｐｌｅｔｉｎｇｔａｓｋｏｂｊｅｃｔｉｖｅｓｉｓｇｒｅａｔｌｙａｆｆｅｃｔｅｄｂｙｔａｓｋｃｏｍｐｌｅｘｉｔｙ，ａｎｄｔｈｅｃｏｎｓｉｓｔｅｎｃｙｂｅｔｗｅｅｎ

ｓｙｓｔｅｍｐｒｏｃｅｓｓｉｎｇｒｅｓｕｌｔｓａｎｄｉｎｉｔｉａｌｏｂｊｅｃｔｉｖｅｓｉｓｐｏｏｒ．Ｉｔｉｓｎｅｃｅｓｓａｒｙｔｏｅｖａｌｕａｔｅａｎｄａｎａｌｙｚｅｔｈｅａｕｔｏｎｏｍｙａｎｄｃｏｎｓｉｓｔｅｎｃｙ

ｏｆｌａｒｇｅｍｏｄｅｌｄｒｉｖｅｎｍｕｌｔｉ⁃ａｇｅｎｔｓｙｓｔｅｍｓ．Ｐｒｅｖｉｏｕｓｓｔｕｄｉｅｓｈａｖｅｎｏｔｙｅｔｃｏｍｐｒｅｈｅｎｓｉｖｅｌｙｅｖａｌｕａｔｅｄｔｈｅａｕｔｏｎｏｍｙａｎｄｃｏｎｓｉｓ⁃

ｔｅｎｃｙｌｅｖｅｌｓｏｆｌａｒｇｅｍｏｄｅｌｍｕｌｔｉ⁃ａｇｅｎｔｓｙｓｔｅｍｓ．Ｔｈｉｓａｒｔｉｃｌｅｐｒｏｐｏｓｅｓａｍｕｌｔｉｄｉｍｅｎｓｉｏｎ