- 1、本文档共28页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
大语言模型的幻觉检测
;
CONTENTS;
背景与动机
大模型创新技术发展的同时,我们还必须不断探索大模型评测技术;
被评测模型能
力范围
评测范围;
大模型能力评估:打造丈量“高山”的尺子
?我们不能预估模型的能力,只能不断探索大模型能力的边界;
a发展大模型创新技术的同时,我们必须探索大模型评测技术;
科技部:科技创新2030—“新一代人工智能”“人工智能基础模型支撑平台与评测技术”旗舰项目支持下,智源研究院牵头联合多个团队研制(2023~2025);;
幻觉定义及检测方法
明确检测的对象是什么,才能开发具有针对性的工具;
幻觉的定义
Hallucinationreferstothephenomenonwherethe
modelgeneratescontentthateitherconflictswith
establishedknowledgeorisunfaithfultotheoriginal
sources.
[1]Siren’ssongintheaiocean:asurveyonhallucinationinlargelanguagemodels.
[2]Asurveyonhallucinationinlargelanguagemodels:Principles,taxonomy,challenges,andopenquestions.
[3]Thedawnafterthedark:Anempiricalstudyonfactualityhallucinationinlargelanguagemodels.
1;;
基于检索的方法;
忠实性幻觉检测方法;
1.用于检测的评测集;
幻觉检测工具的构建;;
诱发式幻觉
?含诱导信息的对话场景中产生的幻觉数据,生成幻觉的同时生成检测/定位/解释等信息(GPT-4生成)
?有幻觉36714条,无幻觉18357条
事实性幻觉忠实性幻觉;
HalluDial评测集
数据量超过14万,覆盖话题丰富,使用途径多样,助力深入研究;
?利用幻觉检测标签,可以评估LLM的幻觉检测能力
?利用幻觉定位和解释信息,可以评估模型定位幻觉并提供理由的能力
?利用HalluDial训练自己的幻觉评估器,自动的评估LLM的幻觉率;;;
主流的大语言模型的幻觉率
检测结果发现
?大语言模型普遍存在幻觉
?GPT系列的模型幻觉率较低,部分国内的开源模型表现良好(如Qwen系列,DeepSeek系列)
?幻觉率与模型规模无明显相关性
?不同模型常见幻觉话题有明显不同;
温度对幻觉率的影响;
总结与展望;
?构建了HalluDial,第一个用于对话级幻觉评估的大型基准,包含146,856个样本的综合数据集,以及幻觉检测、定位和理由等详细信息。
?开发基于HalluDial训练的幻觉判断语言模型HalluJudge,有助于法学硕士对话级幻觉的自动评估。
?大语言模型普遍存在幻觉,GPT系列的模型幻觉率较低,部分国内的开源模型表现良好。;
?大模型评测要促进大模型技术的发展——需要不断的探索和深耕“评测什么”
?深入理解大模型的机理和问题
?准确把握大模型技术的发展趋势
?需要研究创新科学和先进的评测方法——解决“如何评测”的问题;
uu欢迎加入,共同推动大模型评测国际标准;
THANKS
文档评论(0)