Epoch AI发布AI经济影响与能力基准研究
先了解这件事
Epoch AI 的 Epoch Capabilities Index（ECI）是一个综合指标，用超过 50 个基准的分数生成单一通用能力量表，模型在更难基准上表现越好，ECI 分数越高。其领域版 ECI 沿用通用 ECI 的基准难度与斜率、仅重新拟合 LLM 能力参数，Cyber ECI 因纳入通用 ECI 之外的网络安全基准而更新频率更低。ECI 代码已在公开仓库发布。
摘自 Epoch AI：研究、数据与评测
事件进展
2 个进展
- 9月30日 23:27 · 4 篇报道Epoch AI发布多项AI经济影响研究报告Epoch AI：研究、数据与评测：Epoch AI 数学基准动态：GPT-6 Astra 领跑数学，Claude 擅长软件工程
- 9月30日 23:27 · 1 篇报道Epoch AI 发布 Epoch Capabilities Index 综合能力指数Epoch AI：研究、数据与评测：Epoch AI 的 Epoch Capabilities Index（ECI）能力指数如何构建
报道时间线
沿着报道，了解事件的不同侧面。
- Epoch AI：研究、数据与评测Epoch AI：AI 推理成本每季度下降约 47%，年降幅达 13 倍
Epoch AI 测算，自 2023 年以来，达到同等 AI 性能水平的成本在数学、科学和技巧类游戏五项基准上平均每季度下降约 47%，约合每年 13 倍，降速超过电力、算力、电池和 DNA 测序的历史降幅。该机构还指出，美国 GDP 增长因统计遗漏 Nvidia 在美国产生的收入而被低估约 0.3 个百分点，到 2028 年这一缺口可能扩大至 2 个百分点。
- Epoch AI：研究、数据与评测Epoch AI 数学基准动态：GPT-6 Astra 领跑数学，Claude 擅长软件工程
OpenAI 的 GPT-6 Astra 以 166 分登顶 Epoch Capabilities Index，Math-ECI 达 170 创下新纪录，但软件工程 SWE-ECI 为 164，仍落后 Claude Fable 5.1 的 167。
- Epoch AI：研究、数据与评测Epoch AI 能力与基准测试中心：GPT-6 Astra 数学登顶，软件工程仍落后 Claude Fable 5.1
Epoch AI 更新其 AI 基准与能力中心，汇总内部测试与外部数据。GPT-6 Astra 以 166 分登顶 Epoch Capabilities Index，Math-ECI 达 170 创纪录，但 SWE-ECI 164 仍落后 Claude Fable 5.1 的 167。该中心还显示，自 2023 年以来同等 AI 性能的成本每季度下降约 47%，年降约 13 倍。
- Epoch AI：研究、数据与评测Epoch AI 研究：GPT-6 Astra 数学基准领先，软件工程仍落后 Claude Fable 5.1
OpenAI 的 GPT-6 Astra 以 166 分登顶 Epoch Capabilities Index，领先 Claude Fable 5.1 的 164 分和 GPT-5.6 Sol 的 162 分，其 Math-ECI 达 170 创下新纪录。但在软件工程基准上，GPT-6 Astra 的 SWE-ECI 为 164，仍落后于 Fable 5.1 的 167。
- Epoch AI：研究、数据与评测Epoch AI 的 Epoch Capabilities Index（ECI）能力指数如何构建
Epoch AI 的 Epoch Capabilities Index（ECI）是一个综合指标，用超过 50 个基准的分数生成单一通用能力量表，模型在更难基准上表现越好，ECI 分数越高。其领域版 ECI 沿用通用 ECI 的基准难度与斜率、仅重新拟合 LLM 能力参数，Cyber ECI 因纳入通用 ECI 之外的网络安全基准而更新频率更低。ECI 代码已在公开仓库发布。