研究：翻译数据污染可绕过英文检测，TACD被提出

一项 arXiv 计算语言学论文的实验显示，将 MMLU 和 XQuAD 评测题翻译成阿拉伯语、按递增曝光水平喂给四个开源指令微调 LLM 后，英文专用检测方法 TS-Guessing 和 Min-K%++ 的信号基本消失，Min-K%++ 处于随机水平或更低，但英文 MMLU 成绩仍随阿拉伯语曝光上升，说明翻译可以掩盖数据污染。 Chaymaa Abbas、Nour Shammaa 和 Mariette Awad 据此提出 Translation-Aware Contamination Detection（TACD），一种无需训练数据的诊断方法，依据跨语言预测一致性和选项重排进行检测。

AI 根据报道生成 · 1 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。