Hugging Face Blog·· 3 小时前精选AI 评分68
Microsoft 与 Hugging Face 联合发布 ThinkingBox 基准,按数据库终态评估 Agent 一致性
The Agent Said It Was Done. The Database Disagreed.
AI 导读
Microsoft 与 Hugging Face 联合发布 ThinkingBox 基准,通过 OpenEnv 接口开放,覆盖 507 个有状态业务工作流,每个任务重复运行 20 次,按终端数据库状态和副作用评分。
推荐理由
原文用 507 个任务和 20 次重复,量化了一次成功与每次都成的差距,可用于挑选真正可用的 Agent 模型。
来源:Hugging Face Blog · huggingface.co