港科广发布UI2App截图交互推断基准
热点事件持续更新
港科广发布UI2App截图交互推断基准
1 篇报道1 个报道来源23 小时前更新
先了解这件事
AI 综述
港科广提出 UI2App 基准,用于评测 AI 仅凭静态截图推断并实现 App 交互的能力:模型看不到操作轨迹或行为说明,需据此生成可运行的多页面 React 应用。 基准含 600 张截图,组成 95 组状态一致的多页面 Web 应用,每个任务 3 到 14 张截图,共 665 个「应用-交互类别」评测项,覆盖开关、展开/折叠、列表操作、数据增删改查、表单验证、通知反馈和跨页面状态 7 类交互。 生成结果从三个维度评分:能否真正构建运行(EXEC)、与截图的视觉相似度(VFS),以及截图暗含的交互能否被推断并实现(IIS)。
AI 根据报道生成 · 2 小时前更新
最新进展10月24日 11:42
港科广 UI2App 基准:只给截图,AI 能否推断并实现 App 交互报道时间线
沿着报道,了解事件的不同侧面。
10月24日
- 新智元精选港科广 UI2App 基准:只给截图,AI 能否推断并实现 App 交互
港科广提出 UI2App 基准,只给静态截图、不提供操作轨迹或行为说明,考察模型能否推断并实现隐含交互,生成可运行的多页面 React 应用。基准含 600 张截图、95 组多页面 Web 应用、665 个评测项,从能否运行(EXEC)、视觉相似(VFS)和交互推断实现(IIS)三个维度评分。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。