跳到正文
热点事件持续更新

UniPat AI发布论文复现基准PaperBenchX,GPT-6 Astra完整复现率13.98%

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

UniPat AI发布多学科端到端论文复现基准PaperBenchX,并公布对10组前沿模型与Agent框架配置的测评结果:表现最强的GPT-6 Astra在93个真实论文复现任务上的完整复现率仅13.98%。 该基准从93篇研究论文构建93个复现任务,横跨电磁、光光子、化学、材料、生物、机器人等12个研究方向和10种领域原生科学环境,含3168条专家校验评分项。目前从每个研究方向选取1个代表性任务开源,共12个测试任务,另维护81个封闭测试任务;单任务预算4–24小时,中位数7小时。

AI 根据报道生成 · 44 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. 量子位精选
    PaperBenchX 测评:GPT-6 Astra 论文完整复现率仅 13.98%

    UniPat AI 发布的 PaperBenchX 在 93 个真实论文复现任务上测评 10 组前沿模型与 Agent 框架配置,表现最强的 GPT-6 Astra 完整复现率只有 13.98%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。