法律AI援引法条被指不忠实
热点事件持续更新
法律AI援引法条被指不忠实
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
一项反事实审计研究测试了7个开源权重模型(8B-70B)在法律推理中援引裁判依据的忠实性:固定案件事实、把援引法条替换为无关法条后,观察模型判决是否随之改变。 研究称,这些模型在4个法律推理基准上能给出正确法条的比例为66.7%-100%,但替换法条后判决改变的比率在CaseHOLD上仅0.0%-21.7%,在ECHR和SCOTUS上为30.0%-76.7%,在ContractNLI上为43.3%-50.0%,说明援引法条往往并非判决的真正依据。 该研究由Saisab Sadhu、Shreeyans Arora、Pratinav Seth发布在arXiv(cs.AI)。
AI 根据报道生成 · 47 分钟前更新
最新进展10月9日 12:00
法律思维链忠实性反事实审计:模型援引法条并非真正依据报道时间线
沿着报道,了解事件的不同侧面。
10月9日
- arXiv:cs.AI法律思维链忠实性反事实审计:模型援引法条并非真正依据
一项反事实审计发现,7 个开源权重模型(8B-70B)在 4 个法律推理基准上被要求援引裁判依据时,66.7%-100% 能给出正确法条,但替换法条后判决随之改变的比率仅 0.0%-21.7%(CaseHOLD)、30.0%-76.7%(ECHR 和 SCOTUS)、43.3%-50.0%(ContractNLI)。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。