跳到正文
Latent Space· Richard MacManus·· 3 天前AI 评分53

Elorian 推出 DecoyCount 视觉推理基准,实测前沿模型计数与视觉捷径缺陷

Can Frontier Models See Past a Decoy? Elorian Tests Visual Reasoning

AI 导读

Elorian 联合 Mercor 发布 DecoyCount 基准并公布视觉推理测试结果,用于检验模型是在真实计数还是依赖视觉捷径与替代启发式。在测试中前沿模型准确率均低于 50%(最高者 GPT-6 Astra 为 43.17%),Elorian 自研视觉思考模型 Glimpse 在单次独立测试中取得 50.48% 准确率。

来源:Latent Space · latent.space