AI 问小创

你好,我是问小创 AI 助手

告诉我你的需求,我帮你从站内挑最合适的 AI 工具。

推荐结果基于站内收录,仅供参考,请以实际工具信息为准。
猜你想问
推荐一些AI写作工具 有什么AI绘画工具? 推荐视频剪辑AI工具
AI
问小创: 告诉我你的需求,我帮你从站内挑最合适的 AI 工具。

大模型幻觉难题获新突破 谷歌联合团队提出元认知破解路径

2026年6月,谷歌研究院联合以色列特拉维夫大学发布最新研究,提出以元认知技术破解大模型行业长期存在的幻觉痛点。当前主流的扩大训练数据、增设防御机制两类抗幻觉方案均存在明显瓶颈,据测算现有方案最多仅能将高危场景错误率控制在25%左右,且易导致AI过度谨慎牺牲实用性,新方案或为医疗、法律等领域的大模型落地扫清障碍。

配图

去年某三甲医院在测试AI辅助问诊工具时,曾出现大模型将罕见病临床特征与普通感冒诊疗方案混淆的事故,类似的事实性错误在法律文书生成、工业参数计算等高风险场景中,轻则造成财产损失,重则威胁人身安全。长期以来,大模型“一本正经说瞎话”的幻觉问题,始终是阻碍其进入核心生产场景的最大拦路虎。

此前行业对抗幻觉的思路主要分为两类,一类是不断扩充训练数据集规模,试图让大模型覆盖尽可能多的事实信息,从根源上减少错误出现的概率。但无论训练数据集如何扩充,始终无法穷尽所有细分领域的专业知识,更难以覆盖随时更新的动态信息,盲区始终存在。

另一类思路是为大模型设置防御阈值,要求模型在置信度不足时主动拒绝回答。但这类方案往往会带来高额的实用性税:为了把错误率压到安全线以内,不少大模型会主动拒绝超过60%的确定性问题,极大降低了使用效率。

谷歌研究院与特拉维夫大学的联合研究,跳出了“强求大模型零错误”的固有思路,提出核心解法是赋予大模型元认知能力,即让AI能够准确判断自身输出内容的准确性,真正做到“知之为知之,不知为不知”。

研究团队指出,此前行业普遍关注的模型校准优化,仅能调整回答置信度的分布匹配度,即便校准效果达到完美,也很难将高风险场景下的错误率从25%压低至5%的行业通用安全阈值。而加入元认知判别模块后,模型可以主动筛掉自身不确定的回答,在仅降低8%有效回答率的前提下,就能把错误率控制在3%以内,平衡了安全性和实用性。

目前元认知技术已经在谷歌旗下医疗大模型Med-PaLM 3的内测中落地,测试数据显示,其在罕见病诊断场景的错误率较此前版本下降72%,表现远超传统抗幻觉方案。

不过研究团队也坦言,当前元认知模块的训练需要大量垂直领域的高质量标注数据,通用场景下的适配效果还有待验证,距离全场景商业化落地至少还需要12到18个月的技术迭代。

本文基于公开信息分析整理,仅供参考。更多AI工具动态与行业解读,请持续关注本站更新。