跳到正文
热点事件持续更新

DocSem共享任务EVICALC报告与失败分析

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

2026年10月1日,arXiv cs.CL分类下发布的一篇报道显示,EVICALC系统在DocSem共享任务官方最终测试的1,730项任务上仅取得8.61%的联合准确率。该系统流程为:读取PDF、选取段落、让语言模型写出算术表达式并在本地代码中求值。报道同时涉及对该系统失败情况的分析。目前事件进展停留在该测试结果公布阶段,尚无后续更新。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月1日
  1. arXiv:cs.CL(计算语言学,全量分类)
    EVICALC 系统在 DocSem 共享任务中仅获 8.61% 联合准确率

    EVICALC 在 DocSem 共享任务官方最终测试的 1,730 项任务上取得 8.61% 联合准确率,其流程为读取 PDF、选取段落、让语言模型写出算术表达式并在本地代码中求值。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。