HF Daily Papers·· 3 天前精选AI 评分43
HarnessRL:面向开放式 RL 的策略与即时训练框架协同演化方法
HarnessRL: Co-Evolving Policies with a Just-in-Time Training Harness for Open-Ended RL
AI 导读
HarnessRL 提出一种训练时框架,让任务采样、rollout 引导和 rubric 标准随策略协同演化,以应对开放式 RL 中的奖励失效。框架维护训练时记忆,将奖励失效归因于可更新的接口,并通过 proposer 与 just-in-time critic 循环测试和筛选候选更新。
推荐理由
HarnessRL 在 4B 和 9B 模型上较最强基线高 2.8 至 3.1 分,训练步数近乎减半,为开放式 RL 方案比较提供具体参照。
来源:HF Daily Papers · huggingface.co