Apple Machine Learning Research(RSS)·· 2 天前AI 评分47
语言模型的通信瓶颈:树结构表达式序列化的往返研究
The Communication Bottleneck: A Round-Trip Study of Tree-Structured Expression Serialization in Language Models
AI 导读
Apple 研究者提出往返协议,测试语言模型将树结构算术表达式序列化为自然语言后能保留多少信息。评估 16 个模型的所有两两组合发现,通道有损且不对称:交换生成与提取模型可使准确率相差最多 60.4 个百分点,最佳组合达 92.9%;至少 73.6% 的失败源于生成端,难度由树结构而非模型家族决定。约 3600 条微调样本可将所有开源权重模型提升至未训练 Gemini-3.1-Pro 之上。
来源:Apple Machine Learning Research(RSS) · machinelearning.apple.com