跳到正文
热点事件持续更新

港科广发布UI2App截图交互推断基准

1 篇报道1 个报道来源23 小时前更新

先了解这件事

AI 综述

港科广提出 UI2App 基准,用于评测 AI 仅凭静态截图推断并实现 App 交互的能力:模型看不到操作轨迹或行为说明,需据此生成可运行的多页面 React 应用。 基准含 600 张截图,组成 95 组状态一致的多页面 Web 应用,每个任务 3 到 14 张截图,共 665 个「应用-交互类别」评测项,覆盖开关、展开/折叠、列表操作、数据增删改查、表单验证、通知反馈和跨页面状态 7 类交互。 生成结果从三个维度评分:能否真正构建运行(EXEC)、与截图的视觉相似度(VFS),以及截图暗含的交互能否被推断并实现(IIS)。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月24日
  1. 新智元精选
    港科广 UI2App 基准:只给截图,AI 能否推断并实现 App 交互

    港科广提出 UI2App 基准,只给静态截图、不提供操作轨迹或行为说明,考察模型能否推断并实现隐含交互,生成可运行的多页面 React 应用。基准含 600 张截图、95 组多页面 Web 应用、665 个评测项,从能否运行(EXEC)、视觉相似(VFS)和交互推断实现(IIS)三个维度评分。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。