62

AI幻觉与质量控制:当AI一本正经地胡说八道

限时免费阅读中 · 已开放完整章节
写作状态:初稿字数:约4600字日期:2026-07-11

引子:「这篇文章我查不到」

2024年,一位骨科医生使用ChatGPT查找关于「新型可吸收椎间融合器的临床效果」的参考文献。AI迅速给出了5篇看起来很权威的引用,其中包括一篇2023年发表在《Spine》上的文章,作者、期刊、卷号、页码一应俱全。

医生很兴奋,把这5篇标记为「重要参考」,准备在下次科室文献汇报中引用。

然后他做了一件聪明的事——在PubMed里逐一核对这5篇文献。

结果:3篇根本不存在。

作者名字是真实的(在这个领域发表过论文),期刊是真实的,卷号和页码看起来也合理——但整篇文章是AI「编造」出来的。

这不是AI撒谎,这是AI幻觉(Hallucination)。它没有恶意,但它造成的后果——如果在实际决策中引用了不存在的文献——可能是严重的。

62.1 什么是AI幻觉?

62.1.1 一个精准的定义

AI幻觉是指:大语言模型生成的内容在表面上看起来合理、自洽,但在事实上是错误的、虚构的,或无法被验证。

关键词是「表面上看起来合理」。如果AI输出的是一眼就能看穿的胡话,那不算幻觉

——那叫「废话」。真正的幻觉可怕之处在于:它读起来像真的一样。

52.1.2 一个类比帮你理解

假设你给一个医学生出了一道考试题:「简述脊柱侧弯的手术适应证。」

如果这个学生勤奋但基础不牢,他的回答可能是这样的——把教科书上关于骨骼畸形的通用知识拼凑起来,加上一些听起来专业的术语,构建出一个逻辑自洽但关键细节错误的答案。他不是在「撒谎」,他是在「尽自己所能生成一个合理的答案」。

AI的工作方式与此类似:它不是在数据库中检索正确答案,而是在它训练得到的知识分布中,生成一个统计上最可能合理的回答。

62.2 AI为什么会产生幻觉?

62.2.1 三个根本原因

原因 解释 对医生的影响训练数据的缺陷AI学习的是互联网上的海量文本,这些文本本身就包含错误、谣言、过时信息AI可能「学」到了已经过时的诊疗指南概率输出的本质AI工作原理是「下一个词最可能是什么」,而不是「什么是真的」。它追求的是语言的流畅,而非事实的准确AI可能绕不过某个常见的错误认知,因为它在训练数据中出现频率太高知识截止日期大模型的训练有截止日期,之后的医学进展它「不知道」

GPT-4的知识截止于2023年,此后发布的新指南、新药、新证据它无法获取

62.2.2 还有一个原因:你问的方式不对

幻觉的产生与Prompt设计密切相关。

Prompt质量 幻觉概率

「XXXX药的副作用有哪些?」低

——这是固化的知识,训练数据丰富

「给我所有关于XXXX药的罕见副作用,包括那些只有个案报告的」

极高

——AI被逼到了知识边缘,它可能「填

补」看起来合理的罕见副作用

「最近有什么关于XXXX药的新研究?」中高

——AI无法区分「最近」是2021还是

2025

「帮我总结一下2025年AHA发布的心血管疾病防治指南」

极高

——如果它没有这份指南,它可能「生

成」一份

经验法则:当你把AI推向知识边界

——要求罕见病例、最新研究、特定年份的指

——幻觉概率急剧上升。

62.3 幻觉的常见类型

62.3.1 四大幻觉类型

类型 表现 危险等级 示例

编造参

考文献

生成不存在的论文标

题、作者、期刊、卷

✅✅✅ 最危险

「Smith et al., 2023, NEJM,

Vol.388」

——作者存在,但文章不存

夸大研

究结论

把「可能相关」变成

「已证实因果关系」✅✅ 高「临床试验证实维生素D可以预防骨折」

——实际研究只是发现了相关性

混淆相

似概念

把功能相似但机制不

同的药物混为一谈 ✅✅ 高把SSRI和SNRI的不良反应列表混为一

数学/统

计错误

数据计算错误、P值写

错、样本量算错

✅ 中(但容易误导)

「OR=2.3, 95%CI: 1.1-3.5,P=0.04」

——CI和P值不匹配

62.3.2 编造参考文献:最危险的一类

这是医学领域最不容妥协的AI幻觉类型。因为:

验证成本高——每一篇「引用」都需要去数据库里逐条验证信任损害大——如果一篇论文引用了不存在的文献,整篇论文的可信度被根本性地动摇连锁影响——不存在的文献被推荐给其他人,形成虚假知识的传播链一个自测:你可以现在打开ChatGPT,输入:「请列出2023-2025年关于椎间盘退变生物治疗的5篇重要研究,提供完整的引用信息。」然后去PubMed逐条验证。你将亲身体验这个问题有多严重。

62.3.3 混淆相似药物:最容易忽略的危险

AI可能把「阿仑膦酸钠」和「唑来膦酸」的不良反应搞混,可能在讨论「低分子肝素」时突然说到「华法林」的INR监测要求。这些看起来是「小错误」,但在临床场景——给一个有肾功能损害的患者推荐药物时搞错了剂量——后果可能是致命的。

62.4 六步验证法:医生的「防幻觉武器」

这六个步骤设计为递进的——每一步把可信度往上推一级。

六步递进框架第1步:来源检查 → AI引用的文献存在吗?

第2步:逻辑检查 → AI的推理链条成立吗?

第3步:一致性检查 → 同一问题的多次回答一致吗?

第4步:反向验证 → 用你的专业知识挑战AI的结论第5步:独立验证 → 通过非AI渠道(PubMed、UpToDate)核实关键事实第6步:同行复核 → 让另一个人类专家(而非另一个AI)审查AI输出逐步详解第1步:来源检查对于AI声称引用的每一篇文献,执行以下验证: - 去PubMed/Google Scholar中搜

索标题:

  • 检查作者是否真实存在且确实在该领域发表过研究
  • 检查期刊名称、卷号、

页码是否吻合经验法则:如果AI给出了DOI号——不要盲目点击(AI也可能生成看起来合理的DOI)。手动搜索验证。

第2步:逻辑检查AI的推理是否自洽?给它一个常见的临床逻辑测试:

AI说「该患者术后应使用抗生素7天以预防感染」。 逻辑检查:指南推荐的是24h预防性抗生素还是7天治疗性抗生素?这个病例的手术等级是否合理由使用7天?

就像审住院医的病历——不要看文笔,看逻辑。

第3步:一致性检查对同一个问题,用不同的措辞问3次。如果每次得到的信息一致,可信度上升。如果不一致——比如第一次说「推荐内固定」,第三次说「建议保守治疗」

——这就是幻觉的警报。

第4步:反向验证这是医生特有的优势步骤。用你的专业知识提出质疑:

AI说这个病人可以用某种新的术式。反向验证:这个术式的适应证是什么?病人是否符合?禁忌证有哪些?这个术式在你所在医院的条件下可执行吗?

第5步:独立验证用非AI渠道核实AI输出的关键事实:

AI说了什么 用什么独立验证「根据2024年NICE指南 」去NICE官网查看最新版本「该药的半衰期为4.2小时」 查该药的FDA/药典说明书「某Meta分析显示OR=1.8」找到这篇Meta分析原文核对

62.5 人机协作黄金法则

62.5.1 四条法则

法则1:AI是建议者,你是决策者AI可以帮你拓展思路、提醒你可能遗漏的诊断、汇总最新的文献证据。但它不能替代你的临床判断。最后一个「做还是不做」的决定,必须是你独立做出的。

法则2:信任但验证(Trust but Verify)

这个原则来自国际核武器核查谈判,但在AI时代获得了新的含义:

对你的AI助手保持基本信任——它能帮你提高效率。但永远不要对AI的输出放弃怀疑精神。

可以信任什么 必须验证什么AI的文献综述结构合理 综述中引用的每一篇关键文献的出处AI的鉴别诊断列表给了你新思路这些诊断在指南中的位置和证据等级AI的用药建议在方向上正确 具体剂量、禁忌证、与其他药物的相互作用法则3:你的专业判断是最后一道防线AI可以给你10个鉴别诊断,你可以把它作为你的「第二意见」。但如果AI推荐的方案和你的专业判断不一致——在搞清楚之前,不要采纳。

这不是「不相信AI」,这是「尊重你的职业责任」。你花了十几年建立的专业判断力,不应该因为AI说了一句就被推翻。

法则4:AI出错时,责任在你这不是残酷,这是法律的现实和职业的伦理。AI没有医师资格证,没有处方权,也没有医患关系。它给出的任何建议,最终的临床决策和法律责任都落在使用它的医生身上。

62.5.2 一个模型:网球裁判的AI使用手册

想象你在执法一场网球比赛。

AI是你的鹰眼系统——它可以帮你看到肉眼容易漏掉的细节(比如球到底有没有出界),它比你的眼睛在特定任务上更精准。

但鹰眼不是裁判。 裁判仍然要判断球员的行为是否违规、比赛节奏是否需要控制、是否因为特殊情况给选手额外时间。

当鹰眼的判罚和裁判的肉眼判断冲突时——裁判需要在规则框架下做出最终决定。

鹰眼可能出错(摄像头角度、环境影响),裁判也可能出错。但规则规定:裁判的决定是最终决定。

这个模型完美对应了医生和AI的关系:

网球裁判 医生鹰眼系统 AI辅助诊断工具裁判肉眼判断 医生的临床直觉+经验

网球裁判 医生比赛规则 临床指南+医学知识体系最终判罚责任 医疗决策责任

62.6 对医生的启示

启示一:幻觉不是AI的「缺点」

如果你期待一个从不犯错的AI,你会失望——更糟的是,你可能会在第一次遇见幻觉时就全盘否定AI的价值。

理解幻觉是AI工作方式的必然结果,你才能建立一个健康的使用心态:AI是一个强大的但有缺陷的同事,你需要学会和它合作,而不是无条件依赖它。

启示二:幻觉检测能力是一种「新型诊断能力」

就像你学会了通过查体来诊断疾病,你正在学会通过「六步验证法」来诊断AI的输出是否可靠。这种能力未来将成为医生的核心竞争力之一——不是AI能替代你,而是只有你能判断AI说得对不对。

启示三: 最会用AI的医生,是那些最不相信AI的医生

这不是一个悖论。最会用AI的医生,恰恰是那些对AI输出保持最高警惕的医生。 他们用AI来提高效率、拓展视野,但做最终判断时,他们把自己放在驾驶员的位置上。

62.7 本章小结

板块 核心要点

表面合理但事实错误的输出;是生成式AI的必然特征,不是bug

板块 核心要点

AI幻觉的本

幻觉三大根

源 训练数据缺陷、概率输出本质(最求流畅而非准确)、知识截止日期

四类常见幻

觉 编造参考文献(最危险)、夸大研究结论、混淆相似概念、数学/统计错误

六步验证法 来源检查 → :逻辑检查 → :一致性检查 → :反向验证 → :独立验证 → :同行复核

人机协作法

AI是建议者,你是决策者;信任但验证;专业判断是最后防线;出错时责任

在医生

核心理念 最会用AI的医生,是那些对AI输出保持最高警惕的医生

62.8 延伸思考

回顾你在使用AI时,有没有遇到过AI输出看似合理但你后来发现错误的情况?如果有,你是怎么发现的?如果没有,你确定你验证了吗?

「AI是建议者,你是决策者」

——在临床场景中,这句话好说,但真的做得到吗?

当AI的建议和你的直觉相反,且AI的「论证」看起来很充分时,你有多大把握能坚持自己的判断?

如果未来AI的幻觉率从目前的约5-15%降到0.1%——「人机协作黄金法则」还需要吗?在那个阶段,医生的核心价值又是什么?

本章初稿,待浩哥审阅。