大语言模型的幻觉检测 2024-8.pptxVIP

  1. 1、本文档共28页,可阅读全部内容。
  2. 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  5. 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  6. 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  7. 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  8. 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多
大语言模型的幻觉检测 2024-8

大语言模型的幻觉检测

;

CONTENTS;

背景与动机

大模型创新技术发展的同时,我们还必须不断探索大模型评测技术;

被评测模型能

力范围

评测范围;

大模型能力评估:打造丈量“高山”的尺子

?我们不能预估模型的能力,只能不断探索大模型能力的边界;

a发展大模型创新技术的同时,我们必须探索大模型评测技术;

科技部:科技创新2030—“新一代人工智能”“人工智能基础模型支撑平台与评测技术”旗舰项目支持下,智源研究院牵头联合多个团队研制(2023~2025);;

幻觉定义及检测方法

明确检测的对象是什么,才能开发具有针对性的工具;

幻觉的定义

Hallucinationreferstothephenomenonwherethe

modelgeneratescontentthateitherconflictswith

establishedknowledgeorisunfaithfultotheoriginal

sources.

[1]Siren’ssongintheaiocean:asurveyonhallucinationinlargelanguagemodels.

[2]Asurveyonhallucinationinlargelanguagemodels:Principles,taxonomy,challenges,andopenquestions.

[3]Thedawnafterthedark:Anempiricalstudyonfactualityhallucinationinlargelanguagemodels.

1;;

基于检索的方法;

忠实性幻觉检测方法;

1.用于检测的评测集;

幻觉检测工具的构建;;

诱发式幻觉

?含诱导信息的对话场景中产生的幻觉数据,生成幻觉的同时生成检测/定位/解释等信息(GPT-4生成)

?有幻觉36714条,无幻觉18357条

事实性幻觉忠实性幻觉;

HalluDial评测集

数据量超过14万,覆盖话题丰富,使用途径多样,助力深入研究;

?利用幻觉检测标签,可以评估LLM的幻觉检测能力

?利用幻觉定位和解释信息,可以评估模型定位幻觉并提供理由的能力

?利用HalluDial训练自己的幻觉评估器,自动的评估LLM的幻觉率;;;

主流的大语言模型的幻觉率

检测结果发现

?大语言模型普遍存在幻觉

?GPT系列的模型幻觉率较低,部分国内的开源模型表现良好(如Qwen系列,DeepSeek系列)

?幻觉率与模型规模无明显相关性

?不同模型常见幻觉话题有明显不同;

温度对幻觉率的影响;

总结与展望;

?构建了HalluDial,第一个用于对话级幻觉评估的大型基准,包含146,856个样本的综合数据集,以及幻觉检测、定位和理由等详细信息。

?开发基于HalluDial训练的幻觉判断语言模型HalluJudge,有助于法学硕士对话级幻觉的自动评估。

?大语言模型普遍存在幻觉,GPT系列的模型幻觉率较低,部分国内的开源模型表现良好。;

?大模型评测要促进大模型技术的发展——需要不断的探索和深耕“评测什么”

?深入理解大模型的机理和问题

?准确把握大模型技术的发展趋势

?需要研究创新科学和先进的评测方法——解决“如何评测”的问题;

uu欢迎加入,共同推动大模型评测国际标准;

THANKS

文档评论(0)

***** + 关注
实名认证
文档贡献者

信息系统项目管理师持证人

该用户很懒,什么也没介绍

领域认证该用户于2023年08月23日上传了信息系统项目管理师

1亿VIP精品文档

相关文档