研究者提出推理时动态排序Transformer层的LoL架构

Sean McLeish等研究者提出 Library of Layers（LoL）架构，让 Transformer 在推理时动态调整各层的执行顺序，以应对当前任务。 该架构仅用一个超参数控制全局 transformer 块库的大小，从而在参数复用与稀疏性之间平滑切换。目前报道只介绍了架构设计与这一控制方式，未给出实验结果或效果数据。

AI 根据报道生成 · 55 分钟前更新

还没有足够的连续观测数据，暂不绘制趋势。