Skip to content
Source
新智元·· 3h agoAI Score45

港科广新基准:只给截图,AI能把App交互做出来吗?

港科广新基准:只给截图,AI能把App交互做出来吗?

Edge-TTS Studio Audio
Free for all listeners
Click to synthesize audio
00:00
00:00
AI Overview

UI2App评测通过600张静态UI截图,测试AI模型能否推断并实现应用行为,结果显示视觉还原分数不能直接代表交互推断表现,且跨页面状态是模型的共同难点。

Primary Source
Academic Paper·arXiv:2607.06306v2

UI2App评测 (arXiv:2607.06306v2)

“新智元报道 给AI几张网站截图,它已经能快速生成一个「看起来很像」的网页。但真正操作起来呢?在商品页加入商品后,购物车会不会更新;切换页面后,刚才的状态还能不能保留? UI2App关注的正是这个问题:不给功能说明、不给点击轨迹或交互演示,只给静态UI截图,模型能否自行推断并实现其”

Source: 新智元 · aiera.com.cn

Related Products & Analysis

Original·站长/Quantara 团队·~3 min read

Cursor Agent 架构全景拆解:从影子工作区到多文件推演引擎

全面剖析 Cursor 在 Agent 模式下的底层技术实现,解析影子分支隔离、LSP 上下文剪枝以及预测性补全的核心架构细节与工程实践经验。

Underlying architectures & industry dynamicsRead Analysis →
Curated·Vercel Changelog·~1 min read

Vercel v0 推出全新多 Agent 协作画布与实时全栈部署预览

动态速评:v0 正在从单一组件生成器演进为全栈应用搭建协作台,尤其是与 Neon/Postgres 的直连极大降低了全栈原型验证成本。

Underlying architectures & industry dynamicsRead Analysis →