跳到正文
热点事件持续更新

E-MoE:增强混合专家扩散语言模型

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

2026年10月2日,HuggingFace Daily Papers 收录论文《E-MoE:面向非因子化扩散语言模型的增强型混合专家方法》。该研究针对掩码扩散模型反向过程按位置因子化、少步生成质量受限的问题,提出增强型混合专家方法 E-MoE:利用 MoE 主干的路由决策,在离散共享隐变量上构建混合分布,且不增加激活参数量。在合成多模态基准、二值化 MNIST 和 LM1B 上,E-MoE 相比因子化基线改善了少步生成效果。目前该工作处于论文发布阶段,尚无后续进展报道。

AI 根据报道生成 · 59 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月2日
  1. HuggingFace Daily Papers(社区热门论文)
    E-MoE:面向非因子化扩散语言模型的增强型混合专家方法

    针对掩码扩散模型反向过程按位置因子化、少步生成质量受限的问题,研究者提出增强型混合专家方法 E-MoE,用 MoE 主干的路由决策构建离散共享隐变量上的混合分布,且不增加激活参数量。在合成多模态基准、二值化 MNIST 和 LM1B 上,E-MoE 相比因子化基线改善了少步生成效果。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。