Rohan Paul· @rohanpaul_ai · X·· 2 小时前AI 评分47
AI 导读
Pangram 这款 AI 文本检测器漏掉了 79.8% 由 Meta 的 Muse-Glimmer 改写的科学摘要，而在 5,000 篇人类撰写的摘要中只标记出 1 篇。 在东京都立大学的一篇新论文中，研究人员发现，Pangram 漏掉的 AI 改写摘要比例很大程度上取决于 LLM 版本。 这表明它能识别出 93.5% 的 GPT-5 改写内容，却漏掉了另一个新模型 79.8% 的改写内容。其漏检率主要取决于改写所用的模型。
正文
Pangram, the AI-text detector, missed 79.8% of scientific abstracts rewritten by Meta's Muse-Glimmer, while flagging just 1 of 5,000 human abstracts.
In a new paper from Tokyo Metropolitan University, reseaerchers find the share of AI-rewritten abstracts that Pangram misses depends strongly on the LLM version
Shows that it caught 93.5% of GPT-5 rewrites but missed 79.8% from another new model. Its miss rate depended mostly on which model did the rewriting.
来源：Rohan Paul · x.com