论文研究 LLM 二元决策中的风险预算与校准
热点事件持续更新
论文研究 LLM 二元决策中的风险预算与校准
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
arXiv 论文提出在 LLM 工作流的二元决策(如允许/阻止)中,对不确定情况默认采用保守回退,并只对获得效用最大化动作的子集控制错误遗漏风险。作者为 Soundouss Messoudi 和 Youness Mansar。 在覆盖审核、安全与重排序的六个数据集上,朴素阈值选择基线在约半数设定中超出目标风险,Learn Then Test(LTT)方法的超出比例为 7.8%。论文据此称,仅靠类概率接口不足以支撑部署决策。
AI 根据报道生成 · 1 小时前更新
最新进展10月15日 12:00
System One 模型的校准与风险预算决策报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv:cs.LGSystem One 模型的校准与风险预算决策
研究针对 LLM 工作流中允许/阻止、丢弃/保留等二元决策,提出在不确定时默认采用保守回退,并控制被赋予效用最大化动作子集内的错误遗漏风险。在覆盖审核、安全与重排序的六个数据集上,朴素阈值选择基线在约半数设定中超出目标风险,而 Learn Then Test(LTT)为 7.8%。结果表明仅靠类概率接口不足以支撑部署决策。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。