跳到正文
HuggingFace Daily Papers· Hongyin Luo, Wei Fang, Lijie Yang, Owen Stepan, Daniel Suit, Jeff Krapf, Dana Wensberg, Jack O'Brien·· 2 天前精选AI 评分65

对抗性推测推理提升长时程智能体性能

Adversarial Speculative Reasoning Improves Long Horizon Agents

AI 导读

本文提出了一种对抗性推测推理方法,通过训练draft模型在关键决策点被拒绝,使目标模型在无噪声条件下采样关键推理token,从而提升长时程智能体的推理准确性。在复杂智能体编码基准测试中,该方法在不改变目标模型或其输出分布的情况下,显著提高了端到端成功率。

推荐理由

对抗性推理将推测解码从纯加速器转变为主动分配器,用0.06%-0.28%的参数提升长时程智能体准确率。

来源:HuggingFace Daily Papers · arxiv.org