跳到正文
原文
HF Daily Papers·· 10 天前精选AI 评分51

EvalResearchBench:AI 智能体能否为递归式自我改进构建自己的反馈?

EvalResearchBench: Can AI Agents Build Their Own Feedback for Recursive Self-Improvement?

AI 导读

研究提出 EvalResearchBench(ERB),让 AI 智能体在试运行中修订任务与评分器,以测试它们能否为递归式自我改进自动构建反馈。在固定时间和 API 预算下,实验涉及 9 个 researcher 智能体、13 个候选模型和 14 个目标基准;最佳评测器与目标评测在约 75% 的候选对排序上保持一致,低于目标分歧所设的 91% 上限。

推荐理由

论文在固定时间和 API 预算下比较 9 个 researcher 智能体与 13 个候选模型,呈现自动评测器相对 14 个目标基准的一致性和成本表现。

来源:HF Daily Papers · huggingface.co