发生了什么
Ziyang Luo 发布 StateAct(OSWorld 2.0 SOTA 26.9%)
为什么值得关注
首次用程序状态替代像素作为主接口并量化验证,9 倍成本降低与小模型大幅提升兼得,值得复现核心范式并跟踪后续开源进展。
信息来源
以下内容来自公开来源,可打开原文继续核验。
StateAct: Program State, before Pixels, fo
Ziyang Luo 团队发布 StateAct 方法,将程序状态作为 Computer-Use Agent 的主要接口而非像素截图,仅在 1.1% 步骤调用 GUI 专家模型。同一 Claude Opus 4.8 下,OSWorld 2.0 Binary 从 20.6% 提升至 26.9%,Partial 从 54.8% 提升至 61.6%,成本降低 9 倍($7.8 vs $72/任务),Token 消耗从 224K 降至 100K;在 OSWorld-Verified、WindowsAgentArena、AndroidWorld、MobileWorld 四基准上均显著提升。其内部 31B SFR-CUA 模型接入后,OSWorld 2.0 从 7.6% 跃升至 43.2%,各基准均大幅超越同规模基线。
打开原始来源 ↗