
商业 · zh
GPT-6 Astra 爆改Qwen 大脑:只动0.016% 参数,数学成绩疯涨
只改了0.016%的权重,一个8亿参数大模型的数学成绩,就从7.9%飙升到了48.1%。 更夸张的是,动手修改这些权重的,竟然是另一个大模型GPT-6 Astra。 最近,MIT CSAIL的研究团队展示了一种相当大胆的AI优化方法。他们让GPT-6 Astra像程序员阅读和修改代码一样,直接分析神经网络的权重,定位模型的问题,再修改其中的参数。 图|研究博客地址:https://rikiyat.github.io/blog/weight-space-programming/ 整个过程没有使用传统的梯度训练。研究人员仅修改了Qwen3.5-0.8B的131072个参数,就让它在MATH-500上的成绩从7.9%提升至48.1%,GSM8K从13.8%提升至67.1%,指令遵循能力也明显改善。…





