- 1、本文档共56页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
DeepSeek与AI幻觉
清华大学
新闻与传播学院新媒体研究中心
人工智能学院
双聘教授@新媒沈阳团队
博士后张家铖
2025年2月
一、什么是AI幻觉
二、DeepSeek为什么会产生幻觉三、AI幻觉评测
四、如何减缓AI幻觉
五、AI幻觉的创造力价值
案例1
Prompt:给我一些DeepSeek在金融行业的应用案例
DeepSeek:
?某头部银行利用DeepSeek构建因果归因网络,识别
小微企业违约的隐性因素(如上下游账期错配),针
对性设计“供应链票据贴现+账期保险”组合产品,
不良率下降4.2个百分点。
?国信证券在“金太阳APP”中部署DeepSeek-R1-
Distill-32B端侧模型,客户本地输入风险测评数据后,
模型生成个性化投资组合建议,仅将匿名化策略权
重同步至云端风控系统,数据泄露风险降低90%。
案例2
案例3
Whisper:OpenAI的自动语音识别(ASR)系统
行业应用:医疗系统中,将患者与医生的对话问诊过程音频,转写为文字病例,有超过30000名临床医生和40个医疗系统使用
发现:100多个小时的Whisper转录样本,其中约有一半内容存在幻觉
原音频:“嗯,她的父亲再婚后不久就去世了”
转录文本:“没关系。只是太敏感了,不方便透露。她确实在65岁时去世了”
结果:2.6W多份自动转录病例中,几乎每本都存在瞎编和幻觉问题,对患者健康和医疗系统产生严重负面影响
案例4
案例5
什么是AI幻觉?
学术:指模型生成与事实不符、逻辑断裂或脱离上下文的内容,本质是统计概率驱动的“合理猜测”说人话:一本正经地胡说八道
事实性幻觉:指模型生成的内容与可验证的现实世界事实不一致
忠实性幻觉:指模型生成的内容与用户的指令或上下文不一致
提问:糖尿病患者可以通过吃蜂蜜代替糖吗?
分析
分析
错误:蜂蜜虽然是天然食品,但仍然含有大量果糖和葡萄糖,会升高血糖水平,不适合糖尿病患者代替糖使用。
偏题:回答内容虽无事实错误,但与提问“糖尿病患者是否可以用蜂蜜代替糖”无关,未忠实于用户意图。
回答
是的,蜂蜜是天然的,可以帮助糖尿病患者稳定血糖水平。
蜂蜜富含维生素和矿物质,对提高免疫力很有帮助,因此是一种健康的食品。
忠实性幻觉
事实性幻觉
AI为什么会产生幻觉?
数据偏差:训练数据中的错误或片面性被模型放大(如医学领域过时论文导致错误结论)泛化困境:模型难以处理训练集外的复杂场景(如南极冰层融化对非洲农业的影响预测)知识固化:模型过度依赖参数化记忆,缺乏动态更新能力(如2023年后的事件完全虚构)意图误解:用户提问模糊时,模型易“自由发挥”(如“介绍深度学习”可能偏离实际需求)
音乐为什么没有幻觉?
音乐的主观性和多样性:音乐是一种高度主观的艺术形式,人们对音乐的审美和理解有很大的
差异。一段音乐是否“合理”或“正确”,往往取决于文化背景、个人偏好和上下文
音乐的抽象性:音乐本质上是抽象的,不像文本或图像那样直接对应现实世界的具体事物。文
本中的“幻觉”通常是因为模型生成的内容与事实不符,而音乐本身往往缺少明确的事实基础
音乐的可感知性差异:音乐是时间性的艺术形式,即使某些部分听起来不协调或不符合预期,
它们也可能在整个作品的上下文中变得合理。相比之下,文本或图像中的问题往往是瞬间可见的,容易引起注意
音乐“幻觉”的潜在表现:逻辑断裂的歌词、结构混乱的旋律、风格混杂的编曲
AI幻觉的潜在风险
信息污染风险:由于DeepSeek的低门槛和普及度高,大量AI生成内容涌入中文互联网,加剧
了虚假信息传播的“雪球效应”,甚至污染下一代模型训练数据
信任危机:普通用户难以辨别AI内容的真实性,可能对医疗建议、法律咨询等专业场景的可
靠性产生长期怀疑
控制欠缺:DeepSeek的对齐工作较其他闭源大模型有所欠缺,其开源特性也允许使用者随意
使用,可能会成为恶意行为的工具
安全漏洞:若错误信息被用于自动化系统(如金融分析、工业控制),可能引发连锁反应……
AI幻觉评测
测试1:随机生成100条通用提示语,模仿普通用户的真实使用场景,获取大模型回答后
进行人工判断与标注,并进行交叉验证
大模型
幻觉率
DeepSeekV3
2%
DeepSeekR1
3%
Qianwen2.5-Max
2%
豆包
0
事实性幻觉评测
测试2:随机抽取300道事实性幻觉测试题,涵盖健康、科学、历史、文化、音乐
文档评论(0)