摘要
本次按 Asia/Shanghai 2026-10-13 自然日核对论文与开源项目。alphaXiv 返回的两篇论文分别首发于 10 月 7 日和 6 月 18 日,因此当天没有合格新 CUA 论文。源码审计保留 Cua 的跨 OS background-action、浏览器路由和 consent 更新,新增 Hermes Computer Use Plus、Computer Use MCP for Sway、DSH Computer User 与 Agent Desktop;它们分别推进人工接管、截图绑定的动作拒绝、虚拟/真实 action port 和 nested seat 隔离,但都不包含 policy RL update。
核心内容
- Cua 在 0.35.0-0.35.2 中修复 macOS hidden-Space/后台输入、Linux AT-SPI、Windows UIA/consent,并把 browser page 路由和后台 desktop-pointer 拒绝写入 driver;cutoff checks 为 27 success、2 skipped、1 macOS unit failure。(来源:原始资料(本地存档))
- Hermes Computer Use Plus 将九个原生工具与按窗口 viewer、Stop 和 Take over/Hand back 接到 Hermes;Stop 后动作可能已经发生,因此 unknown 不得盲重试。(来源:原始资料(本地存档))
- Computer Use MCP for Sway 用 screenshot freshness、private blackout、protected-app refusal、focus-bound typing 和 kill switch 约束 Sway 输入,但通知与截图后 popup 仍在边界外。(来源:原始资料(本地存档))
- DSH Computer User 默认只在 snapshot 上演练动作,切到 real 才调用 Win32
SendInput;这提高可见性和接管,但 virtual mode 不能算真实任务执行。(来源:原始资料(本地存档)) - Agent Desktop 用 nested Hyprland 分离 seat、focus、clipboard 与 Xwayland,但裸 compositor/input 命令和 D-Bus 应用仍可能逃逸到用户 session。(来源:原始资料(本地存档))
相关页面
- 概念:Computer-Use Agent、Execution-Based Agent Evaluation
- 实体:Cua、Hermes Computer Use Plus、Computer Use MCP for Sway、DSH Computer User、Agent Desktop
- 主题:Browser and Computer-Use Agents
来源
- 原始文件:原始资料(本地存档)
- 定位信息:各项目小节记录精确日期窗、cutoff commit、源码能力、测试/CI、许可证、运行要求、安全边界、独立检查与分类。
待核实问题
- Cua cutoff 的 macOS unit failure 需对照后续修复;四个新项目都缺本知识库侧真实 OS/GUI E2E,Sway popup race、Hermes Stop 后 unknown、DSH real-mode 接管和 Hyprland bypass 尤其需要验证。