跳到正文

#数据/训练

今日 93 条
9月30日周三
  1. METR:Blog(网页)22

    METR 招募 ML 工程师推进 AI R&D 能力评估项目

    METR 正在招募 ML 研究工程师和科学家,推进针对 AI R&D 能力的评估开发,目标是在 AI 智能体可能大幅自我提升、引发危险能力"爆炸"之前提供早期预警。METR 已开始开发阈值评估,用于判断 AI R&D 能力是否达到需要信息安保等防护措施的程度,并计划逐步建立能平滑追踪进展的评估体系。该机构称,具备丰富 ML 研发经验的研究者和工程师是当前评估进展的主要瓶颈。

  2. LlamaIndex:产品、工程与评测60

    LlamaIndex 谈 AI 文档抽取:真正容易出错的是 Schema 设计

    LlamaIndex 发文指出,AI 文档抽取的阅读环节已很成熟,生产管线丢失精度的主因是 schema 设计而非模型。文章以 180 页信贷协议中一个利率字段对应三个真实数值为例,区分了解析失败与规格失败两类表现相同的错误,列举 required 字段被编造、同名字段多义、重复结构被压成标量等常见缺陷,并给出 nullable、语义消歧、数组化等修正示例。

  3. LlamaIndex:产品、工程与评测36

    非结构化数据抽取:如何把文档转化为结构化洞察

    企业约 90% 的数据是非结构化的,非结构化数据抽取通过 NLP、NER 和 LLM 把文档转为可查询的结构化信息。现代方案不再依赖易碎的规则解析器,而是用 LLM 的零样本能力按 JSON schema 抽取字段,省去为每种文档训练专用模型。生产级流水线还需覆盖摄取、OCR 与分块预处理、校验以及输出集成等环节。

  4. LlamaIndex:产品、工程与评测41

    AI 文档分类:自动分拣与打标的实用指南

    AI 文档分类通过训练模型读取文档内容与结构,自动完成分类和打标,替代关键词检索和规则路由。流程分五个阶段:解析预处理、特征提取、模型分类、打标与置信度评分、路由到下游工作流。大语言模型可零样本分类,无需标注训练数据;LlamaParse 等工具用布局感知视觉解析提升预处理质量,置信度评分则让低置信结果转人工复核。

  5. Stanford HAI News(网页)34

    斯坦福 HAI:AI 如何加速科学发现,从 Evo 2 到虚拟细胞

    斯坦福 HAI 发文梳理 AI 加速科学发现的进展:Brian Hie 团队打造的 Evo 2 是迄今最大的生物学 DNA 语言模型,基于 9 万亿碱基对、400 亿参数训练,可像聊天机器人一样补全基因序列。Emma Lundberg 团队则正构建模拟人类细胞的基础模型,用于加速药物发现与个性化医疗,并为此开发了 Biomni 供生物学家交互分析数据。

  6. Fireworks AI(网页)55

    Fireworks AI 通过三组受控实验给出从 LoRA 切换到 FullFT 前的测试方法

    Fireworks AI 在 Qwen3.5-9B 上用 Placement、寄存器分配和 Nexa VM 三个可自动验证任务做对照实验,提出在把 LoRA 换成 FullFT 前先依次测试数据覆盖、学习率等训练配方和 adapter rank。实验显示单任务场景下调数据或配方基本消除 FullFT 优势,固定预算混合任务中 FullFT 仍领先 4.29 个百分点,并将进一步发布后续实验。

  7. Epoch AI:研究、数据与评测52

    Epoch AI 上线 AI 芯片销售数据集并提供 CSV 下载

    Epoch AI 的 AI chip sales 数据页追踪并估算主要 AI 芯片的销量与出货量,以及估算的总算力、成本和功耗。数据主要来自公司财报评论、分析师估算和媒体报道,提供按芯片类型、组织和按芯片时间线的 CSV 及 ZIP 打包下载,更新至 Aug. 27, 2026,并附 H100e 算力口径等常见问题说明。

  8. Epoch AI:研究、数据与评测29

    Epoch AI 如何识别与标注 ML 硬件数据集

    Epoch AI 通过标注知名 AI 模型训练所用的芯片来识别 ML 硬件,并补充了虽未见于这些系统训练记录、但依据描述、支持的数值格式或同族关系可判定为 ML 用途的硬件。该数据集为每块芯片记录数据手册信息,涵盖算力、裸片面积等,并借助新闻报道或硬件价格档案补充发布时价格;并非所有硬件都有完整或适用的信息,因此部分字段常为空。

  9. Epoch AI:研究、数据与评测37

    Epoch AI:AI 推理成本每季度下降约 47%,年降幅达 13 倍

    Epoch AI 测算,自 2023 年以来,达到同等 AI 性能水平的成本在数学、科学和技巧类游戏五项基准上平均每季度下降约 47%,约合每年 13 倍,降速超过电力、算力、电池和 DNA 测序的历史降幅。该机构还指出,美国 GDP 增长因统计遗漏 Nvidia 在美国产生的收入而被低估约 0.3 个百分点,到 2028 年这一缺口可能扩大至 2 个百分点。

  10. Epoch AI:研究、数据与评测36

    Epoch AI 发布 AI 芯片数据与研究报告合集

    Epoch AI 更新了覆盖 170 多款 AI 加速器的机器学习硬件数据,并发布报告估算华为 2026 年 AI 算力产量不足 Nvidia 的 4%,若无法获得外国内存,2028 年份额可能降至约 1%。其 AI 数据中心探索器现已覆盖 86 个站点、约占全球 AI 算力的 44%,同时贸易数据分析显示 2024–25 年存在约 30 亿美元芯片经马来西亚流入中国的迹象。

  11. Epoch AI:研究、数据与评测35

    Epoch AI:华为到 2030 年能否追上 Nvidia?

    Epoch AI 评估,受美国出口管制限制最关键扩产手段,华为 2026 年 AI 算力产量不足 Nvidia 的 4%,若无法获得外国存储,2028 年这一份额可能降至约 1%。该机构还估计,截至 2025 年约有 29 万至 160 万 H100 等效算力(中位数 66 万)被走私至中国,约占中国总算力的三分之一。

  12. Epoch AI:研究、数据与评测38

    Epoch AI 财务数据:AI 芯片销售、超大规模厂商资本开支与 Anthropic、OpenAI 收入

    Epoch AI 的财务数据库用财报与公司披露估算 AI 芯片的算力、功耗与支出,并追踪超大规模厂商的 AI 建设融资。其测算显示,微软、亚马逊、Alphabet、Meta、Oracle 的合计现金资本开支预计在 2026 年 Q3 超过经营现金流;HBM 占 AI 芯片组件成本的 63%,高于 2024 年 Q1 的 52%。

  13. Epoch AI:研究、数据与评测28

    Epoch AI 发布 AI 模型扩展性数据:追踪 3600 余个模型与算力趋势

    Epoch AI 的公开数据库已追踪 1950 年至今超过 3600 个机器学习模型,并发布多项扩展性研究。其测量显示 GPT-5.6 Terra 和 Sol 的首次 token 延迟随上下文长度呈二次增长,而 Claude Sonnet 5 和 Opus 5 接近线性。此外,全球 AI 芯片内存带宽年增 4.1 倍,2025 年 Q4 已达约 7000 万 TB/s。

  14. Epoch AI:研究、数据与评测44

    Epoch AI 的 Epoch Capabilities Index(ECI)能力指数如何构建

    Epoch AI 的 Epoch Capabilities Index(ECI)是一个综合指标,用超过 50 个基准的分数生成单一通用能力量表,模型在更难基准上表现越好,ECI 分数越高。其领域版 ECI 沿用通用 ECI 的基准难度与斜率、仅重新拟合 LLM 能力参数,Cyber ECI 因纳入通用 ECI 之外的网络安全基准而更新频率更低。ECI 代码已在公开仓库发布。

  15. Epoch AI:研究、数据与评测47

    Epoch AI 发布 AI 公司数据集:追踪前沿模型公司的营收、融资与算力支出

    Epoch AI 上线"AI companies"数据集,追踪处于 AI 前沿的基座模型公司的营收、融资、员工数、算力支出和使用量数据,来源为公司披露、高管表态与媒体报道。数据集于 2026 年 9 月 29 日更新,提供全量 ZIP 及算力支出、融资轮次、员工、营收、使用量等分项 CSV,可通过 Python 直接读取。

  16. Epoch AI:研究、数据与评测32

    Epoch AI 发布 AI 模型数据集,收录具有历史意义的模型

    Epoch AI 上线 AI 模型数据集,收录文献综述、Papers With Code、高被引论文及顶会论文等来源的模型,覆盖发布时达到 SOTA、引用超 1000 次或月活超百万的模型。数据集提供 notable、large-scale、frontier 及全量模型四类 CSV 下载,最新更新于 2026 年 9 月 30 日,并附参数规模、数据集大小与训练算力的测算文档。