跳到正文
热点事件观察中

TestPrism 发布测试评估基准与 TestHelix 方法

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

TestPrism 论文作者发布测试评估基准 TestPrism 与改进方法 TestHelix,用联合成功指标(Joint Success Function)替代单参考解评测:生成的测试需在初始程序状态失败、接受所有有效候选并拒绝所有无效候选才算通过。 TestPrism 包含来自 17 个来源的 300 个测试任务和 3000 个候选实现,有效与无效解各占一半。在 14 个基线编码智能体配置上,联合成功指标达标率仅 28.00%,而单参考解成功率 59.67%。在两个模型上,TestHelix 相比原生框架对照组将联合成功指标提升 8.67 至 9.00 个百分点。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. Hugging Face 每日论文
    TestPrism:用 3000 个候选实现重新审视测试评测

    TestPrism 提出用 Joint Success Function 替代单参考解评测测试质量,该指标要求生成的测试在初始程序状态失败、接受所有有效候选并拒绝所有无效候选。

本事件热度走势

可比范围当前
4
可比范围峰值
410月9日 13:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。