SAC-Bench 把环境声音与一致或矛盾的口头描述放进同一段音频,检验音频语言模型是否真正根据声音作答。基准覆盖事件、时间与空间关系。
作者发现,模型在纯声音任务上表现好,不代表能够抵御录音中错误话语的影响。有些提示修改虽然减少了顺从话语的回答,却未必改善对真实声音的理解。
SAC-Bench 把环境声音与一致或矛盾的口头描述放进同一段音频,检验音频语言模型是否真正根据声音作答。基准覆盖事件、时间与空间关系。
SAC-Bench 把环境声音与一致或矛盾的口头描述放进同一段音频,检验音频语言模型是否真正根据声音作答。基准覆盖事件、时间与空间关系。
作者发现,模型在纯声音任务上表现好,不代表能够抵御录音中错误话语的影响。有些提示修改虽然减少了顺从话语的回答,却未必改善对真实声音的理解。