一项名为 Weight Space Programming 的研究尝试让语言模型直接读取和修改另一个神经网络的权重,而不是通过常规优化器完成训练。研究博客公开了实验方法,并提供相应的代码与运行记录。
作者报告,在一组 Qwen3.5-0.8B 实验中,只修改约 0.016% 的权重,MATH500 得分便由 7.9% 提升至 48.1%。这些结果来自特定模型与评测设置,仍属于探索性实验,不能直接推及所有模型或任务。
图片来源:GitHub 官方资料。
来源:GitHub · RikiyaT/lm_understand-logs · Weight Space Programming 研究博客
