METR 报告称 Anthropic 进化速度翻倍,约 80% 增量来自 AI
第三方评估机构 METR 发布对 Anthropic 的调查报告,其团队进入 Anthropic 内部约 11 周核查资料并访谈研究人员后称,Anthropic 过去一年的基准能力进步大致相当于此前两年,自 2025 年 10 月起 AECI 指标进步速度约为此前的 1.9 倍(95% 置信区间 1.5 至 2.8 倍),同期全行业前沿模型加速仅 1.4 倍。
前沿模型的能力进步斜率正在变陡,且八成动力来自 AI 自己,AI 参与研发的自我增强迹象有了第三方量化数字。
- 影响前沿能力一年走完两年的路,按现有模型水平做的一年期规划可能更快被新版本覆盖;实验室内部还有未公开模型,只按发布会和公开榜单评估供应商会低估其储备;能力节奏加快会抬高模型选型和试点的复核频率。
- 参考可考虑把模型能力复评周期从半年压缩到季度,用自有业务基准重测新版本再定投入;工程团队值得小范围试点 Agent 辅助开发,记录实验产出速度的变化,再判断能否采用 Anthropic 研究员的用法。