LoOPSD：循环教师在线自蒸馏方法
热点事件持续更新
LoOPSD：循环教师在线自蒸馏方法
1 篇报道1 个报道来源18 小时前更新
先了解这件事
AI 综述
Wei Fan 等人提出 LoOPSD 在线自蒸馏方法：搜索模型自身的层执行顺序来构建一个更强的教师模型，再把教师的预测优势蒸馏回学生模型，且保持权重不变。 在 GSM8K 数据集、400-token 思考预算下，该方法把 Qwen3-1.7B 的准确率从 42.30% 提升到 79.61%，并且后续蒸馏轮次还能继续提升。其做法是交替进行层顺序搜索与蒸馏，每轮从更新后的学生模型重建教师。
AI 根据报道生成 · 2 小时前更新
最新进展10月15日 12:00
LoOPSD：用循环教师做同策略自蒸馏报道时间线
沿着报道，了解事件的不同侧面。
10月15日
- arXiv：cs.AILoOPSD：用循环教师做同策略自蒸馏
LoOPSD 通过搜索模型自身的层执行顺序构建更强教师，再将教师的预测优势蒸馏回学生，且权重不变。在 GSM8K、400-token 思考预算下，它把 Qwen3-1.7B 准确率从 42.30% 提升到 79.61%，后续蒸馏轮次还能继续提升。该方法交替进行层顺序搜索与蒸馏，每轮从更新后的学生重建教师。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。