跳到正文
热点事件持续更新

法律AI援引法条被指不忠实

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

一项反事实审计研究测试了7个开源权重模型(8B-70B)在法律推理中援引裁判依据的忠实性:固定案件事实、把援引法条替换为无关法条后,观察模型判决是否随之改变。 研究称,这些模型在4个法律推理基准上能给出正确法条的比例为66.7%-100%,但替换法条后判决改变的比率在CaseHOLD上仅0.0%-21.7%,在ECHR和SCOTUS上为30.0%-76.7%,在ContractNLI上为43.3%-50.0%,说明援引法条往往并非判决的真正依据。 该研究由Saisab Sadhu、Shreeyans Arora、Pratinav Seth发布在arXiv(cs.AI)。

AI 根据报道生成 · 47 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. arXiv:cs.AI
    法律思维链忠实性反事实审计:模型援引法条并非真正依据

    一项反事实审计发现,7 个开源权重模型(8B-70B)在 4 个法律推理基准上被要求援引裁判依据时,66.7%-100% 能给出正确法条,但替换法条后判决随之改变的比率仅 0.0%-21.7%(CaseHOLD)、30.0%-76.7%(ECHR 和 SCOTUS)、43.3%-50.0%(ContractNLI)。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。