Anthropic内部Model 4曝光,METR报告称其能力增速升至此前约2倍
第三方评测机构METR发布报告称,Anthropic未公开的内部Model 4综合能力指数AECI达178.6分,超过公开模型Opus 5.5的174.5分,15项基准测试正确率全部过半。
这是一份第三方对头部实验室内部模型能力增速的测算,核心发现是AI辅助研发带来的加速呈持续态势,而关键数据被当事方大幅删除。
- 影响若加速属实,前沿模型迭代周期缩短,企业选型与技术栈的复核节奏需要相应加快;报告关键数据被当事方删除且指数为内部口径,不宜直接作为采购依据;用Agent并行跑实验的研发组织方式值得对照自身团队评估。
- 参考可考虑把模型供应商的迭代速度纳入选型评估,按季度复核技术栈;值得在研发团队试点把多个想法并行交给Agent验证,并记录从想法到出结果的耗时变化。