研究者在可穷举的谜题上测试四个开放权重模型,发现随机调整呈现顺序能扩大有效答案的覆盖。
同一个谜题可以有许多正确解,但多次采样往往集中于少数答案。加入可唯一确定罕见解的线索后,模型通常也能找到它,说明低采样频率与解题能力是两个不同的问题。
在符号谜题上,随机呈现或随机指定搜索顺序使答案覆盖指标提高 26 至 42 个百分点;在 ZebraLogic 上提高 11 至 26 个百分点。相应正确性指标最多下降 3 和 4 个百分点。
配图为 GETAI 原创 AI 主题插画。
GETAI EDITORIAL DISPATCH新闻报道
研究者在可穷举的谜题上测试四个开放权重模型,发现随机调整呈现顺序能扩大有效答案的覆盖。