跳到正文
热点事件持续更新

Dressage 双粒度 Staleness 控制限制异步 RL 版本偏移

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Dressage 的 Staleness 控制机制在 Trajectory 与 Batch 两个粒度上限制异步强化学习(RL)训练中的版本偏移。 异步 RL 中,数据采样与模型更新并行进行,旧版本策略产生的数据继续用于当前模型更新会引发版本偏移,影响训练稳定性。Dressage 相应地在 Trajectory(单条轨迹)与 Batch(训练批次)两个层级约束数据的陈旧度,以控制这一偏移。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月20日
  1. 掘金
    【Agentic RL】Dressage Staleness 控制深度分析

    Dressage 的 Staleness 控制在 Trajectory 与 Batch 两个粒度上限制异步 RL 的版本偏移。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。