OrionMoE-Small 表格基础模型发布

Mohamed Bouadi 等作者发布 OrionMoE-Small，一个紧凑的表格上下文学习基础模型，将分布感知表示与数据集条件化的稀疏混合专家计算结合。 该模型基于双轴 Transformer 架构，沿特征轴选择性激活专家，路由决策同时参考单个特征表示与整体数据集上下文。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。