跳到正文
热点事件持续更新

RePara强化扩散LLM并行生成

1 篇报道1 个报道来源21 小时前更新

先了解这件事

AI 综述

Jiahao Kuang等作者提出 RePara,用组相对策略优化强化短连续 token 块,以提升扩散大语言模型的并行生成能力,并降低 rollout 与 log-probability 重算成本。 其动因是固定配额评测显示:四款代表性扩散大语言模型在数学与代码任务上并行生成严重退化,每步生成 16 tokens 时所有得分低于 15%。 上述效果来自作者在论文中的表述,属于方法提出方的主张。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.AI
    RePara:强化 Diffusion LLM 并行生成能力

    针对扩散大语言模型并行生成的固定配额评测显示,四款代表性模型在数学与代码任务上严重退化,每步 16 tokens 时所有得分低于 15%。为此提出的 RePara 通过组相对策略优化强化短连续 token 块,并降低 rollout 与 log-probability 重算成本。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。