大模型解释反而让人更轻信？研究揭示"虚假信任"陷阱

研究发现，LLM的推理轨迹和事后解释虽能增加用户接受度，但无法帮助识别错误答案，反而制造"虚假信任"。唯有对比式双重解释能真正提升用户辨别AI正误的能力。本文将围绕这一核心观点展开背景、实验、结果及启示的讨论。

问题背景

大语言模型（LLM）和大推理模型（LRM）正应用于医疗诊断、法律咨询等关键任务，但无法保证答案正确。为帮助用户判断信任度，主流做法是提供推理轨迹、摘要或事后解释等溯源说明。然而，这些解释究竟是帮助识别错误，还是仅说服用户接受答案（无论对错），存在根本性张力。

实验设计

研究采用组间设计，模拟用户无法独立验证AI答案的真实场景。测试四种解释条件：

1. 推理轨迹（完整逐步推理）
2. 推理摘要（轨迹精简概括）
3. 事后解释（答案生成后额外说明）
4. 对比式双重解释（同时呈现支持与反对论据） 核心指标为"虚假信任"——用户对错误AI答案的信任程度。

关键结果

• 推理轨迹与事后解释的陷阱：此类解释显著提高用户接受率，但无差别（无论答案对错），制造认知偏差——用户因"合理"推理过程而相信结论，未评估有效性。
• 对比式双重解释的突破：唯一能改善用户辨别能力的条件，让用户更好区分正确与错误输出。

理论意义

• 解释的说服性vs信息性：传统认为解释增强透明度，但本研究显示其可能仅具说服性，让用户接受AI权威而非独立判断，高风险场景下更危险。
• 批判性思维需对抗视角：对比式解释有效是因为迫使用户权衡不同论据，与法律辩论、同行评审机制呼应。

实践启示

1. 高风险场景优先对比式解释：默认提供双重解释，虽增加认知负担但必要。
2. 重新评估推理轨迹：若展示需添加提示（长推理≠正确推理）。
3. 培养用户批判性AI素养：教育用户理解AI局限、识别错误模式。
4. 建立错误反馈机制：如置信度校准、外部知识交叉验证。

局限与未来

• 任务领域限制：聚焦逻辑验证任务，主观/复杂领域（创意写作）需进一步验证。
• 用户代表性：参与者未必覆盖所有群体，不同背景用户反应可能不同。
• 长期效应未知：实验测量即时行为，长期使用的适应性需研究。 未来需探索更多场景下的解释效果及用户长期反应。