跳到正文
热点事件持续更新

作者发布AMLworld-Compact评估集与HT-Coreset协议

1 篇报道1 个报道来源12 小时前更新

先了解这件事

AI 综述

Natapong Nitarach等作者发布AMLworld-Compact评估集及配套的HT-Coreset下采样协议,用于降低大语言模型在反洗钱任务上的评测成本。该评估集保留全部非法测试交易,仅从有监督分数分层中采样良性交易。 作者称,HT-Coreset协议在HI-Small和LI-Small上分别将评测目标减少271倍和611倍;在发布规模下,F1的RMSE为0.00至2.58个百分点,而使用HT权重的均匀采样为4.44至7.41个百分点,同时保守区间仍然较宽。作者同时发布了评估集、构建代码与审计工具。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv:cs.CL
    AMLworld-Compact:用重要性加权降采样降低 LLM 评测成本并诊断错误

    AMLworld-Compact 是一套保留全部非法测试交易、仅从有监督分数分层中采样良性交易的 LLM 评测集,其 HT-Coreset 协议在 HI-Small 和 LI-Small 上分别将评测目标减少 271 倍和 611 倍。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。