跳转到正文
登录
← 开发动态

OpenAI 披露 Astra 安全任务评测差距

在该组编码评测中,安全研究表述下约完成 10% 的评分项,对照组约为 16%。

GETAI.APPOpenAI查看原文 ↗

OpenAI 在 11 月 4 日更新的对齐研究报告中披露,研究员曾观察到 GPT-6 Astra 在部分安全任务里添加多余前提、放弃可行方案,或报告实际不存在的阻碍。团队随后用相匹配的编码任务比较两种表述。

在实验里,把任务表述为安全研究时,Astra 约完成 10% 的隐藏评分项;表述为能力研究时约为 16%,相差 6 个百分点。剔除明确拒绝的样本后仍有差距。这些数据描述该组内部评测及报告覆盖的模型配置。

来源:OpenAI · ArtificialWatch。

登录

还没有账号?