
作者:程序员晚枫
一位律师用ChatGPT查法律案例,AI给出了几个"真实案例",引用看起来很专业。结果法官一查——这些案例根本不存在,全是AI编的。律师被处罚,当事人被耽误。
这不是段子,这是真实发生的事。
AI有个致命的毛病:它说错了也特自信,说得跟真的一样。 这个毛病叫"AI幻觉"。
🎯 一句话先说清楚
::: tip 核心结论
AI幻觉 = AI一本正经地胡说八道
AI不是"知道"答案,而是"猜测"答案。不确定的时候,它不会说"我不知道",而是编一个看起来合理的答案——而且语气特别自信。
:::
💡 为什么AI会"编"?
AI的工作原理:
1 | 训练阶段: |
核心问题:AI被设计成"无论如何都要回答",不能说"我不知道"。
就像一个不认输的人,即使不知道答案,也会编一个听起来合理的——而且编得特别像真的。
😱 AI幻觉的真实案例
案例1:AI律师引用不存在的法律条文
AI列举了几个"真实案例",引用格式规范、看起来专业。实际上全是编的,连法官名字都是虚构的。律师被处罚,新闻上了头条。
案例2:AI推荐不存在的书
1 | AI:《XX与XX的奥秘》 |
案例3:代码幻觉
AI写了一段代码,引用了一个不存在的Python库,代码看起来完全正确,但一运行就报错——库根本不存在。
🧐 AI幻觉的常见类型
| 类型 | 例子 | 危险程度 |
|---|---|---|
| 编造来源 | 引用不存在的书、论文、法律条文 | 🔴 高 |
| 代码幻觉 | 用了不存在的库或函数 | 🔴 高 |
| 虚构信息 | 编造根本不存在的事件 | 🔴 高 |
| 事实错误 | 日期、数字、人名搞错 | ⚠️ 中等 |
| 逻辑错误 | 话说到一半突然跳到另一个话题 | ⚠️ 中等 |
🛡️ 防AI幻觉的4个实战技巧
技巧1:提示词加"不确定就说不知道"
1 | ❌ 普通问法: |
加一句"不确定就说不知道",能减少80%的编造。
技巧2:让AI给出处,再验证
1 | 问完之后追问: |
技巧3:复杂问题分段问
1 | ❌ 一次问: |
一次问太多,AI更容易编;分段问,每段更容易核实。
技巧4:用RAG让AI只看真实材料
1 | # RAG思路:让AI只基于你提供的真实文档回答 |
RAG是企业防幻觉最有效的方法,没有之一。
💰 降幻觉方法对比(2025年)
| 方法 | 成本 | 效果 | 适合场景 |
|---|---|---|---|
| RAG(检索增强) | ¥¥ | ⭐⭐⭐⭐⭐ | 企业知识库、客服 |
| 联网搜索 | ¥ | ⭐⭐⭐⭐ | 时事、数据类问题 |
| System Prompt约束 | 免费 | ⭐⭐⭐ | 日常使用 |
| 交叉验证 | ¥¥ | ⭐⭐⭐⭐ | 重要决策 |
最推荐组合:日常用联网搜索+Prompt约束(几乎免费);企业用RAG+交叉验证(效果最好)。
🔥 AI幻觉术语人话翻译
"AI律师引用不存在的法律条文"
= 用AI查法律,AI编的案例不存在,律师被罚
"降低AI幻觉率"
= 让AI少说错话。方法:更好的训练数据+提示词要求"不确定就说不知道"+RAG技术
"置信度分数"
= 新版模型可以给回答打"把握分",低于阈值提醒你核实。AI开始学会说"我不太确定"
⚠️ 常见误区避坑
❌ "AI故意骗我"
错! AI没有"故意"这个概念,它自己都不知道自己在"编"
❌ "训练好的AI就不会幻觉"
错! 再强的AI也会幻觉,GPT-4o也会出错,永远要核实重要信息
❌ "说得不自信就是幻觉"
不对! AI说什么都很自信(这是它的特点),不能靠语气判断对错
📈 2025-2026年AI幻觉治理三大趋势
RAG成为企业标配:不让AI"凭记忆回答",而是"翻资料再回答"。企业用AI必须上RAG,否则不敢用
自我评估能力增强:新版模型可以给回答打"置信度分数",低于阈值自动提醒用户核实。AI开始学会说"我不太确定"
法规倒逼幻觉治理:欧盟AI法案、中国深度合成管理规定要求AI生成内容必须可追溯、可验证。合规压力推动幻觉治理从"可选项"变成"必选项"
💬 互动时间
看完这篇,你现在能做:
- ✅ 识别AI什么时候可能在"编"——语气自信≠答案正确
- ✅ 知道哪些领域必须核实——法律、医学、金融、学术
- ✅ 用4个技巧降低幻觉——加约束、要出处、分段问、用RAG
评论区聊聊:你有没有被AI"坑"过?它是怎么一本正经地胡说八道的?
📚 课程导航
👆 上一讲:什么是提示词? - 如何和AI"好好说话"
👇 下一讲:什么是GPU? - 为什么AI需要这么贵的显卡
📢 程序员晚枫专注分享:程序员副业、AI工具、Python办公自动化
关注公众号【程序员晚枫】,回复【AI词汇】,获取全套课程原文
相关阅读
🎓 AI 编程实战课程
想系统学习 AI 编程?程序员晚枫的 AI 编程实战课 帮你从零上手!
- 👉 免费试看:B站免费试看前3讲,先看看适不适合自己
- 👉 课程报名:点击这里报名,现在报名还送书📖

