跳转到正文
登录
← 开发动态

让 AI 直接改模型权重,研究团队公布实验

一项名为 Weight Space Programming 的研究尝试让语言模型直接读取和修改另一个神经网络的权重,而不是通过常规优化器完成训练。研究博客公开了实验方法,并提供相应的代码与运行记录。

GETAI.APPGitHub查看原文 ↗
Weight Space Programming 原作者实验图

一项名为 Weight Space Programming 的研究尝试让语言模型直接读取和修改另一个神经网络的权重,而不是通过常规优化器完成训练。研究博客公开了实验方法,并提供相应的代码与运行记录。

作者报告,在一组 Qwen3.5-0.8B 实验中,只修改约 0.016% 的权重,MATH500 得分便由 7.9% 提升至 48.1%。这些结果来自特定模型与评测设置,仍属于探索性实验,不能直接推及所有模型或任务。

图片来源:GitHub 官方资料。

来源:GitHub · RikiyaT/lm_understand-logs · Weight Space Programming 研究博客

登录

还没有账号?