摘要

AutoSaddler 是 Microsoft 的自动 harness 优化系统,从失败执行轨迹诊断根因,修改 prompt、tool、middleware 或 agent-loop code,再用评估与选择门保留候选。

核心内容

基本信息

  • 实体类别:自动 harness optimizer。
  • 关键名称或版本:V2;MIT;尚无 GitHub Release。
  • 时间范围:2026-05-11 创建;2026-08-25 首次公开并完成当前主要推送;2026-09-03 核实。

重要事实

关系与影响

AutoSaddler 与 Meta-Harness、Self-Harness、HarnessLens 都把 harness 当作可编辑对象,但它更强调可持久工程 artifacts 和具体集成插件。

分歧与变化

README benchmark 与 GAIA2 smoke 是项目报告;开发集上的候选选择不自动证明隐藏测试泛化,更不等于 RSI ignition。

相关页面

来源

待核实问题

  • 需在公开 held-out 任务和固定预算上复现 V2 的泛化收益与恢复一致性。