跳到正文
热点事件历史事件

REINFORCE Zero:内核对齐实现稳定异步强化学习

1 篇报道1 个报道来源5 天前更新

先了解这件事

AI 综述

2026年11月6日,NVIDIA Research 与 Inferact 在 vLLM 博客提出 REINFORCE Zero。该工作针对异步强化学习中 rollout 与训练器之间的 logprob 差距,将其拆分为权重滞后和内核不一致两项来源。方法上先对齐内核,再采用不裁剪的 token 级重要性采样修正权重滞后。报道称,这一做法使异步 RL 在 lag 64 下仍能稳定训练。

AI 根据报道生成 · 4 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. vLLM Blog
    REINFORCE Zero:内核对齐让异步 RL 在 lag 64 下稳定训练

    NVIDIA Research 与 Inferact 提出 REINFORCE Zero,把异步 RL 中 rollout 与训练器的 logprob 差距拆成权重滞后和内核不一致两项,先对齐内核再用不裁剪的 token 级重要性采样修正权重滞后。

本事件热度走势

当前热度 3·可比范围峰值 6(11月7日 00:00)·近 24 小时可比范围变化 -49%

0246811月7日00:0011月7日10:0011月7日21:0011月8日07:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。