弱推理模型的集成增强：多智能体系统如何实现性能跃升

本文探讨核心问题——多个弱推理模型能否通过集成匹敌强模型？研究通过验证器支持的委员会搜索机制，以GPT-5.4 nano的8个提案经批评-比较器编排，在SWE-bench上达到76.4%解决率，追平顶级模型独立表现。关键洞察：集成效果并非仅依赖智能体数量，而是需有效识别弱模型提案中的正确方案。

大语言模型领域长期存在直觉：多个弱模型组合能否达到单个强模型性能？本研究聚焦推理模型，探索验证器支持的委员会搜索作为推理时增强机制的可行性。挑战传统认知：机制并非简单“更多智能体更有帮助”，需在无隐藏验证器访问时，通过批评器和比较器识别正确方案。

研究建立形式化框架，分解为四个维度：提案覆盖度、局部可识别性、进展性、多样性。覆盖度可通过重复采样放大，但仅靠覆盖度不足以创造有效批评器/比较器；可靠性能放大需额外局部可靠性信号（如执行结果、证明检查、测试等）。

研究给出基于排名的理论界限，展示局部选择错误如何组合成可靠轨迹。同时刻画提案方上限：oracle best-of-k收敛点限于提案系统赋予非零有用概率的任务切片集合，即完美选择机制的性能提升存在天花板，取决于提案池内在质量。

SWE-bench Verified数据集实验结果：单个GPT-5.4 nano解决67.0%任务；相同模型的8个提案经批评-比较器编排，解决率达76.4%，与Gemini 3 Pro、Claude Opus4.5 Thinking独立表现持平，接近79.0%的oracle best-of-8理论上限。

核心发现：弱模型已能生成大量正确解决方案，关键在于识别与选择。批评-比较器机制成功证明，通过精心设计的验证与比较流程，可从弱模型输出中提取高质量结果。这对降低部署成本意义重大——无需依赖昂贵顶级模型，优化选择机制即可释放弱模型潜力。

研究分析剩余失败案例，主要源于提案覆盖度不足（共享盲点）。仅靠更强选择机制无法弥补提案池根本缺陷，未来需同时提升提案质量与优化选择机制。

本工作对AI系统设计部署有深远影响：通过智能集成架构，显著提升弱模型实用性能，为构建成本效益更优的推理系统提供新思路。企业可降低计算成本获得接近顶级模型的性能，推动AI技术在更广泛场景落地。