跳转到正文
GETAI.APP
开发动态arXivGETAI.APP查看原文

Visual Cipher Bench 测试 AI 从图中自行发现规则

40 道原创图谜区分视觉规则发现与执行能力,机制提示能显著改变结果。

拼图主题插画

Visual Cipher Bench 收集 40 道原创视觉谜题,只提供少量黑白线图与最少提交说明,要求智能体自行找出解题机制,而不是照着文字规则执行。

团队比较八个前沿模型的 29 种推理配置,最高准确率为 26.7%。在十题子集上提供不泄露答案的机制提示后,准确率明显上升。作者据此区分“执行多步计划”与“从视觉证据发现规则”两种能力,结果限于该谜题集合。

来源:arXiv。

配图:GETAI.APP 原创主题插画,非新闻现场实拍或官方产品界面。

登录

每一次探索,都更进一步。

从这里,开启新的灵感。

还没有账号?