跳到正文
热点事件持续更新

残差流激活可预测 LLM 评判位置翻转

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

一项 arXiv 论文研究提出,用 LLM 初始裁决前记录的残差流激活来预测评判因候选回答顺序产生的翻转。在 JudgeBench 的 534 对样本上,针对三个 Qwen3 评判模型和 Llama-3.1-8B 训练的线性探针,达到 .621–.850 的 AUROC。 研究者称,该探针比结合置信度、logits、回答长度和初始选择的基线高出 .062–.113。结果仅来自上述模型与样本的测试,不能直接推广到其他模型或数据集。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月7日
  1. arXiv:cs.LG
    能否预测 LLM 评判的位置翻转?基于残差流激活的线性探针研究

    研究发现,初始裁决前记录的残差流激活可预测 LLM 评判因候选回答顺序产生的翻转。在 JudgeBench 的 534 对样本上,针对三个 Qwen3 评判模型和 Llama-3.1-8B 的线性探针达到 .621-.850 AUROC,比结合置信度、logits、回答长度和初始选择的基线高 .062-.113。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。