研究：LLM对just与only话语粒子更敏感

一项发表于 arXiv 的案例研究称，大语言模型与人类都更偏好对话中出现 "just" 和 "only" 这类话语小品词，且对 "just" 比对 "only" 更敏感；该研究由 William Sheffield 等人完成，进行了行为与机制分析。 研究还称，指令微调会提高这种敏感度；“only” 的敏感单元能选择性迁移到排他性 "just"，而所有 "just" 单元都能同等迁移到 "only"，据此研究者认为 LLM 的词级小品词表征部分按语义组织。 研究团队公开了代码、带语义标注的对话刺激材料以及人类偏好标注。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。