跳到正文
新智元· 新智元·· 21 小时前精选AI 评分66

Scale AI 联合 Elorian 发布 HSS 基准:人类 93.1%,最强模型仅 53.6%

新基准开测「AI第六感」!人类一眼秒懂,最强模型只拿53.6分

AI 导读

Scale AI 联合 Elorian 发布新基准 Humanity's Sixth Sense(HSS),测试模型对画面隐含信息的直觉式视觉推理,20 名人类参与者得分 93.1%,榜首 GPT-6-astra 开到最大推理强度也只有 53.6%,25 个模型中位数为 30.9%。

推荐理由

失败归因显示94%的错误来自感知而非逻辑推理,为多模态模型改进方向提供了具体诊断。

来源:新智元 · mp.weixin.qq.com