智能体工作流中的隐形危机：近失与潜在策略失败检测

本文聚焦LLM智能体工作流中的"近失"现象——即结果正确但决策过程绕过关键策略检查的潜在失败。研究揭示传统评估仅关注最终结果的盲点，提出基于ToolGuard框架的检测方法，实验发现8-17%的正确结果存在近失风险，强调智能体系统需从"结果正确"转向"过程可信"。

在LLM智能体应用中，人们常忽视决策过程合规性。"近失"指结果正确但过程违规（如航空订票智能体跳过会员等级检查却侥幸成功）。传统评估仅对比最终状态与地面实况，无法识别这类"侥幸成功"，其隐患在真实复杂场景可能引发灾难。

研究基于ToolGuard框架，将自然语言策略转化为可执行守卫代码，实时监控工具调用并记录决策轨迹。近失检测核心是判断工具调用前是否获取必要前提信息——若缺乏信息仍做出正确选择，则构成近失（如退票前未验证身份却符合条件）。

在航空基准测试中，多个主流LLM（开源/专有）的轨迹显示：8-17%的正确结果存在潜在策略失败。即每6-12个"正确"决策中，1个是"碰运气"，这在高要求场景（如航空）累积风险巨大。

近失比显式错误更危险（隐蔽、反映策略理解缺陷、削弱可解释性）。评估需转向过程导向：追踪完整轨迹、验证信息充分性、识别侥幸成功、量化近失率，确保智能体真正理解策略而非依赖统计捷径。

企业应：1.测试引入过程评估，注入边界案例；2.建立策略监控与轨迹记录机制；3.将近失率纳入模型选型；4.常态化审计智能体行为，应对模型更新与数据漂移。