跳到正文
热点事件持续更新

SPLICE离线生成训练数据提升推理模型表现

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

宾夕法尼亚州立大学等机构的研究者提出 SPLICE,把推理模型训练轨迹的验证与修复从训练循环移到离线数据生成阶段:由第二个模型仅依据参考解答,实时校验推理模型生成的轨迹,在最后一个已验证正确的步骤截断失败轨迹,再自适应拼接增强提示,直到推理恢复。 研究者称,用 SPLICE 生成轨迹微调的模型在 AIME 上优于用未编辑轨迹蒸馏的同款模型,并在经人工评分验证的评分协议下于奥赛证明题上同样更优;其轨迹在难点处呈现拼接提示式的分支行为,预测熵上升。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv:cs.AI
    SPLICE:用演示者失败轨迹的提示拼接提升推理模型数学与证明能力

    SPLICE 将验证与修复移出训练循环,改为离线数据生成:第二个模型仅依据参考解答,实时校验推理模型轨迹,在最后一个已验证步骤截断失败轨迹,并自适应拼接增强提示直至推理恢复。用 SPLICE 轨迹微调的模型在 AIME 上超过用未编辑轨迹蒸馏的同款模型,并在经人工评分验证的评分协议下于奥赛证明题上同样更优,其轨迹在难点处呈现拼接提示式的分支行为,预测熵上升。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。