MIT 的 Astra 修改 Qwen 权重研究遭 spaCy 作者质疑,称其呈现方式存在误导
spaCy 作者 Matthew Honnibal 发文质疑 MIT 爆火的 Astra 研究存在严重误导,该研究此前宣称仅修改 Qwen3.5-0.8B 的 0.016% 权重,就把数学成绩从 7.9% 提升到 48.1%。
争议的实质是论文把两种完全不同的技术路径包装成同一种读写模型权重的能力,属于 AI 研究传播中的夸大式呈现。
- 影响企业评估这类自动修改模型权重的宣传时,不能沿用论文摘要的统一叙事,需核对实验条件是否一致;其背后大模型用工具诊断调试其他模型的能力确有进步,对模型运维场景有参考价值。
- 参考可考虑在遇到 AI 自动改权重的成果宣传时,先核对参数规模、是否允许运行代码和反馈测试次数再判断能力边界;值得让模型工程团队评估用编程回路诊断内部模型的可行做法。