简介:AI幻觉在不同学科领域的分布极不均衡:数学、物理等形式科学场景的错误多为可验证的计算疏漏,事实性幻觉率普遍低于10%;而历史、文学艺术等人文社科场景的幻觉率可达20%-30%甚至更高,且以难以识别的凭空虚构为主。本文系统对比两类场景下AI错误的类型、成因、识别难度与校验方式,并给出分领域的使用建议与风险控制要点。
很多人对“AI幻觉”的印象停留在“模型会算错题”。但结合近年国内外多轮权威基准测试与AI指数类报告的普遍结论,可以发现一个与大众直觉相反的事实:AI在理科题上出错多,并不代表幻觉多;真正危险的幻觉,恰恰集中在最不容易被看穿的人文社科领域。
如果不分领域地笼统讨论“AI会不会编造内容”,既无法正确评估业务落地风险,也无法设计合适的校验流程。本文聚焦一组核心对比:形式科学领域(数学、物理等)的AI错误模式 vs 人文社科领域(历史、政治、哲学、文学艺术等)的AI幻觉模式,并将应用科学、经济法律社会学作为中间梯度一并纳入,帮助读者建立完整的领域风险地图,进而回答“哪些场景能放心用、哪些场景必须设防线、校验成本如何分配”这三个实际问题。
在进入领域对比之前,必须先区分两类性质完全不同的模型失准,这本身就是本文的第一组对比:
两者的识别成本、危害方式与应对策略完全不同,这也是后续各领域差异的根源。
尽管表现迥异,形式科学与人文社科场景中的AI失准仍有若干共性:
形式科学的错误集中在计算步骤疏漏、公式笔误,极少出现无中生有的虚构,错误仍发生在“已知知识框架内”;人文社科的错误形态则是编造——虚构学者观点或著作、史实张冠李戴、事件细节编造、解读逻辑混乱,且真假信息交织在一起。
综合近年多轮公开权威评测的量级参考(具体数值随模型与版本浮动):
形式科学有唯一、可验证、逻辑闭环的标准答案。一道积分题算没算对,数值验算一次就有结论,推理链条可追溯,很容易定位错误发生在哪一步。人文社科大量内容没有唯一标准答案,存在海量学术争议与语境依赖,“某位学者对某事件的评价是否被断章取义”,往往需要领域专家才能判断。
形式科学的训练数据中知识一致性极高:公理、定理、公式在全人类语料中高度统一,对错边界绝对清晰。而人文社科的小众史实、冷门观点在训练数据中覆盖度很低,当模型缺乏相关知识时,为了维持文本连贯,会倾向于“补全”出貌似合理的虚构内容——这正是幻觉的核心发生机制。
理科错误错得明显,非专业人士借助验算工具也能发现;人文社科幻觉则以极其自信的语气输出,非专业人士很难一眼识别,甚至会被“引用格式完整、行文逻辑通顺”的表象进一步误导。这才是真正危险的幻觉:它不报错、不显形,而是静默污染使用者的知识体系。
| 对比维度 | 形式科学(数学、物理等) | 应用科学/计算机/地理 | 经济/法律/社会学 | 历史/政治/哲学/文学艺术 |
|---|---|---|---|---|
| 事实性幻觉率 | 最低(普遍<10%) | 较低(10%-15%) | 中等(15%-25%) | 最高(普遍20%-30%,细分可超40%) |
| 核心错误类型 | 计算疏漏、公式笔误 | 参数错误、场景适配偏差 | 法条/数据编造、观点拼接 | 史实张冠李戴、虚构著作/引言/细节 |
| 错误性质 | 能力边界内错误 | 能力边界内为主 | 虚构与片面拼接 | 无中生有式虚构 |
| 知识结构 | 唯一答案、逻辑闭环 | 行业标准、规范可验证 | 流派争议、语境依赖 | 无唯一答案、争议海量 |
| 可验证性 | 高,可程序化验算 | 较高,可对照规范 | 中,需查权威来源 | 低,常需专家判断 |
| 识别难度 | 低 | 较低 | 中 | 高 |
从左到右,本质上是一条“知识可验证性递减、语料争议度递增”的光谱,幻觉率沿这条光谱单调上升。
用一段示意性伪代码说明两类场景的校验逻辑差异:
# 示意性伪代码:分领域的幻觉校验流程def verify(answer, domain):if domain in ["数学", "物理"]:# 形式科学:错误显性,程序化验算即可兜底return recompute_and_compare(answer)else:# 人文社科:来源追溯 + 人工终审citations = extract_citations(answer)if any(not exists_in_trusted_kb(c) for c in citations):return "存在无法溯源的引用,转入人工复核"return "来源可查,仍需领域人工终审"
条件化建议如下:
AI幻觉的分布遵循一条清晰规律:知识越有唯一答案、越可验证,幻觉越少且越显性;知识越依赖语境、越有争议,幻觉越多且越隐蔽。形式科学领域的AI错误是“可见的能力边界”,用验算即可兜底;人文社科领域的AI幻觉是“不可见的凭空虚构”,必须依靠来源溯源与人工终审设防。理解这条领域风险光谱,才能为不同业务场景匹配合适的信任等级与校验成本,把AI真正用在安全边界之内。