跳到正文
原文
Hugging Face Blog·· 3 小时前精选AI 评分68

Microsoft 与 Hugging Face 联合发布 ThinkingBox 基准,按数据库终态评估 Agent 一致性

The Agent Said It Was Done. The Database Disagreed.

AI 导读

Microsoft 与 Hugging Face 联合发布 ThinkingBox 基准,通过 OpenEnv 接口开放,覆盖 507 个有状态业务工作流,每个任务重复运行 20 次,按终端数据库状态和副作用评分。

推荐理由

原文用 507 个任务和 20 次重复,量化了一次成功与每次都成的差距,可用于挑选真正可用的 Agent 模型。

来源:Hugging Face Blog · huggingface.co