生成式AI在引导性干扰下的答案一致性研究.pdfVIP

2025年2月计算机应用文摘第41卷第4期

生成式AI在引导性干扰下的答案一致性研究

12

王萍，游强华

（1.川北医学院基础医学与法医学院，四川南充637000；

2.川北医学院管理学院，四川南充637007）

摘要：生成式AI在自然语言处理领域展示了强大的文本生成能力，但其在引导性干扰下的答案一致性

和稳定性问题仍未得到充分研究。文章以7个主流生成式AI模型为对象，围绕数学、语文、计算机、英语和

地理5个学科，设计了涵盖易、中、难3种难度等级的测试题目，并通过多轮引导性干扰来评估模型的答案一

致性与稳定性。研究结果表明，各模型在基础知识点的首次回答中表现较好，但在处理复杂推理任务和多

轮干扰时，一致性和稳定性显著下降。部分模型在特定学科中表现出优势，但不同模型在面对引导性干扰

时的表现差异明显，部分模型在推理能力和上下文记忆方面存在不足。

关键词：生成式AI；引导性干扰；答案一致性；多学科测试；模型评估

中图分类号：TP18文献标识码：A

ResearchonanswerconsistencyofgenerativeAIunder

guidedinterference

12

WANGPing，YOUQianghua

（1.CollegeofBasicMedicineandForensicMedicine，NorthSichuanMedicalCollege，Nanchong，Sichuan637000，China；

2.CollegeofManagement，NorthSichuanMedicalCollege，Nanchong，Sichuan637007，China）

Abstract：GenerativeAIhasdemonstratedpowerfultextgenerationcapabilitiesinthefieldofnaturallanguage

processing，butitsanswerconsistencyandstabilityunderguidinginterferencehavenotbeenfullystudied.The

articlefocusesonsevenmainstreamgenerativeAImodelsanddesignstestquestionscoveringeasy，medium，and

difficultlevelsaroundfivedisciplines：mathematics，Chinese，computerscience，English，andgeography.

Multipleroundsofguidedinterferenceareusedtoevaluatetheconsistencyandstabilityofthemodels̓answers.The

researchresultsindicatethateachmodelperformswelli