研究：105个语言模型单词选择题答案趋同

Tapan Parikh 发布的一项 arXiv 论文测试了 105 个语言模型在 96 个“说出一个词”单轮提示上的答案选择：被要求“挑一个词”时，46% 的模型选择了“serendipity”。所有提示词、对话记录和代码均已公开。 研究还发现，96 个类别中有 28 个类别单一答案占比超过 80%，87 个主流实验室模型的集中度不低于整体水平。轻度后训练和人格微调模型的答案分歧最大，重度后训练的助手模型最趋同，监督微调是模型走向趋同的最大一步。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。