跳到正文
原文
HF Daily Papers·· 3 天前精选AI 评分43

HarnessRL:面向开放式 RL 的策略与即时训练框架协同演化方法

HarnessRL: Co-Evolving Policies with a Just-in-Time Training Harness for Open-Ended RL

AI 导读

HarnessRL 提出一种训练时框架,让任务采样、rollout 引导和 rubric 标准随策略协同演化,以应对开放式 RL 中的奖励失效。框架维护训练时记忆,将奖励失效归因于可更新的接口,并通过 proposer 与 just-in-time critic 循环测试和筛选候选更新。

推荐理由

HarnessRL 在 4B 和 9B 模型上较最强基线高 2.8 至 3.1 分,训练步数近乎减半,为开放式 RL 方案比较提供具体参照。

来源:HF Daily Papers · huggingface.co