跳到正文
HuggingFace Daily Papers· Kaiser Sun, Yongchan Kwon, Zain Hasan, Shang Zhu, Kaitlyn Zhou, Federico Bianchi·· 3 天前精选AI 评分65

LLM智能体推理努力水平的经济学研究

What Effort Level Should I Choose? On the Economics of Reasoning Effort in LLM Agents

AI 导读

该研究测量了不同努力水平对专有和开源模型在四个基准测试上的反事实影响,发现高努力水平虽然能提高整体准确性,但经常在低努力能解决的任务上失败,且成本最高可达最低水平的42倍。研究提出一种从最低努力开始并在验证失败后升级的替代方案,在大多数专有模型上以更低成本匹配或优于固定最高努力水平。

推荐理由

研究揭示了LLM智能体推理努力水平的经济学悖论:高努力不保证更好结果,反而可能改变任务解决轨迹。

来源:HuggingFace Daily Papers · arxiv.org