摘要
本次按 Asia/Shanghai 2026-10-10 自然日核对新项目与实质更新。alphaXiv 没有返回合格 CUA 或 CUA 相关 Agentic RL 论文;源码审计保留 Cua 的实质更新,以及 Sidescreen、Phone Use Page、DSH Computer Use Fusion、Handbrake 和 SideGate。这些项目分别覆盖独立 display、Android mixed observation、persistent native control、视觉风险确认和 state-diff 安全验证,但都不是严格 Agentic RL 或 RSI。
核心内容
- Cua 将 macOS screenshot 默认最长边限制为 1366 px,并把 quiet action 的观察等待缩短到约 300 ms;
run_script改为默认开放、operator 可退出。窗口末 GitHub checks 为 16 success、3 skipped。(来源:原始资料(本地存档)) - Sidescreen 以每 Agent 一个 macOS virtual display 配合 accessibility tree、screenshot action、takeover 和 help request,解决共享鼠标键盘的争用;它使用私有 API 和现有登录态,不是 OS sandbox。(来源:原始资料(本地存档))
- Phone Use Page 把 Android 视频、UI tree、文本目标、UHID 和 bounded QuickJS 放到同一 browser-facing console,并分别标注视频与 tree freshness;窗口末 CI 成功,但本轮没有真实设备 E2E。(来源:原始资料(本地存档))
- DSH Computer Use Fusion 以 persistent JavaScript 和 native UIA/AX 批量动作换取吞吐,却明确删除审批、目标 freshness、caller ownership 与 stop/recovery;不能把其执行便利性解释为安全性。(来源:原始资料(本地存档))
- Handbrake 用 marked screenshot 与视觉 judge 在 browser action 前分类高风险副作用并 fail closed;作者构造的 50-screen 评测不能替代开放网页、真实账户和跨工具攻击面测试。(来源:原始资料(本地存档))
- SideGate 将 pre-action gate 与 post-action multi-domain state diff 组合,但 README 的 0% CVR/100% SSR 来自固定 synthetic transitions;其规则分类、token binding 和真实 CUA 集成仍待验证。(来源:原始资料(本地存档))
相关页面
- 概念:Computer-Use Agent、Execution-Based Agent Evaluation、Agentic RL
- 实体:Cua、Sidescreen、Phone Use Page、DSH Computer Use Fusion、Handbrake、SideGate
- 主题:Browser and Computer-Use Agents、Agent Harness 与 Agentic RL 开源生态
来源
- 原始文件:原始资料(本地存档)
- 定位信息:按项目小节记录精确时间、cutoff commit、实现、测试/CI、许可证、运行要求与限制。
待核实问题
- 需在真实 macOS、Android、Windows 和 live-account browser 环境复现 takeover、freshness、confirmation 与 recovery。
- 需为 marked-screen judge 和 state-diff gate 增加跨工具、prompt injection、动态 DOM、API side effect 与 approval-binding 测试。