跳到正文
The Decoder· Jonathan Kemper·· 4 小时前AI 评分60

新基准 Taste-Bench 显示 AI 智能体长期决策判断力不足

AI agents have bad taste in long-term decisions and a new benchmark proves it

AI 导读

论文作者提出 Taste-Bench,用决策分叉衡量智能体在长期任务中的判断力,即他们所称的 taste。该基准包含 502 道题,来自 SWE-bench Pro 和 METR 的 MALT 等数千次智能体运行记录,每题让模型在两条路径中二选一。

来源:The Decoder · the-decoder.com