跳到正文
热点事件持续更新

本地LLM智能体数据工程基准评测发布

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

一项 arXiv 预印研究发布本地开源权重 LLM 智能体的数据工程基准评测,用 15 个移动出行工作流任务覆盖数据发现、连接器、交通数据流处理、语义增强、特征工程、验证、可视化和报告,在消费级 GPU 上对 10 种本地配置各重复五次,共完成 1500 次打分尝试。 作者称,在超过 20 亿参数的模型中,闭环工作区条件相较一次性生成将通过率提高 26.7 至 52.0 个百分点,最佳配置达到 85.3% 的产物级成功率;量化后的 90 亿参数模型在约 6.5 GB 显存占用下达到 69.3%。

AI 根据报道生成 · 52 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月9日
  1. arXiv:cs.AI
    本地 LLM 智能体能否胜任数据工程?一项可复现性实证研究

    一项 arXiv 预印本研究用 15 个移动出行工作流任务评测本地开源权重 LLM 智能体,在消费级 GPU 上对 10 种配置各重复五次,共 1500 次打分尝试。超过 20 亿参数的模型中,闭环工作区条件将通过率较一次性生成提升 26.7 至 52.0 个百分点,最佳配置达到 85.3% 产物级成功率,量化后的 90 亿参数模型以约 6.5 GB 显存占用达到 69.3%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。