研究论文METR · METR
METR:Anthropic AI 研发能力增速约达 2024–2025 基线的 2 倍,多数归因于 AI 使用
阅读 28
- 发布日期
- 2026-11-06
- 类型
- 研究论文
- 相关机构
- METR
- 信息来源
- METR
这件事意味着什么
【要点】
- 独立评估机构 METR 于 2026-11-05 发布对 Anthropic 的高权限 AI R&D 加速评估公开版(实地工作约 2026-08-12 至 10-29,约 2.5 FTE,Anthropic 对非公开信息有单方 redact 权)。
- 主观结论:到 2026-10,Anthropic 在「可明确界定任务」上的能力改进速度,大约是 2024-03 至 2025-10 历史速率的 2 倍(不确定区间约 1.3–3x)
- 其中当前加速的多数(粗估约 80%)更可能来自 AI 辅助研发,而非训练算力增速。
- 关键可公开数字:内部模型 AECI(Anthropic 版 Epoch Capabilities Index)自 2025-10 起加速约 1.9x(95% CI 1.5–2.8x),约等于过去一年完成此前两年的基准进步
- METR 确信加速不是由训练算力增长加速驱动。
- 访谈/自报 uplift 与「signs of life」指向更高自治贡献可能临近
- 未识别未来 12 个月明确瓶颈,但理解多次翻转、不确定大。
- Anthropic redact 了多数对结论最有信息量的证据,公开透明度受限——读者需更多依赖 METR 判断。
- 同日另发对 Anthropic 2026-08 Risk Report「automated R&D」章节的独立审阅(companion,本条 related)。
【我们的判断】
一背景
- AI 辅助 AI 研发(automation of AI R&D)是 RSP/失控风险叙事的核心指示器。
- METR 这次不是又一次外部基准刷榜,而是带内部数据、访谈与 redact 约束的「高权限但非员工级」评估——公开结论强、证据链被公司裁剪,本身就是治理信号。
二对照
- 相对 Anthropic 自身 system card / Haiku 卡上约 1.7x 的 AECI 加速叙述,METR 因纳入更新的未发布内部模型把主估计抬到 ~1.9x,并明确反对「Mythos Preview 一次性跳跃后回到旧斜率」的假说。
- 相对 Epoch 公开 ECI 全行业斜率,子集到 Anthropic + 内部模型会抬高加速倍数
- 若把历史基线换成全行业,加速可能更接近 ~1.4x——报告自己列出了低估/高估通道。
- OpenAI 侧尚无对等公开「高权限 R&D 加速审计」可比。
三影响
- 短期会重塑政策与媒体对「是否已进入自我加速」的讨论;投资人与安全社区会追问 redact 缺口与 RSP 阈值是否触发。
- 中期盯:其他实验室是否接受同类审计、瓶颈证据是否翻转、全自治实验贡献是否从 signs-of-life 变成可计量份额,以及 AECI 与真实世界影响是否脱钩。
- 以 paper 发
【可核验】
继续了解相关进展
本页由 AGI Pulse 聚合,仅保留标题与链接,不转载正文。 编辑政策