看看这篇https://arxiv.org/html/2611.18856v1
来自夹夹 QQ 群讨论,审核后公开 · 。查看原始讨论
提问
回答
这篇是 Google Cloud AI 和 DeepMind 刚发的工作,核心解决一个很现实的工程痛点:用自动化手段(RSI)调优出来的 Agent Harness,一旦换了底层模型或者换了新任务数据集,直接拿过去跑往往会掉分。
论文里给了一个很直观的例子:用 Opus 5.5 辛辛苦苦演化出来的 Harness,直接切到 Gemini 3.8 Flash 上跑,开局得分比原始的 Seed Harness 还低(Workspace 场景直接掉到 68.41,Seed 是 73.89)。原因在于,只把演化后的代码交给下一轮优化器,优化器根本不知道当年为什么要加某个 Hook、为了修什么 Badcase、改完之后到底有没有效,结果就是要么把前人踩坑换来的护栏当冗余删掉,要么在同一个坑里反复试错。
他们的解法叫 Self-Improvement Memory(SIM),注意这不是给执行任务的 Agent 用的记忆,而是专门给外层「改 Harness 的优化器(Proposer 和 Selector)」用的经验账本。具体做法很朴素但有效:
按「反复出现的 Harness 根因问题」做归类,比如过早结束任务、工具调用格式错乱之类。每条记录下面挂着历次修改的完整档案:改了什么以及为什么改、改之前预测能修好哪些任务、跑完之后实测结果如何(包括改崩了或者没修好的失败记录),以及当时的模型、Benchmark 和轮次上下文。每一轮优化,Proposer 和 Selector 都会全量读取这份 SIM,再去决定继承过来的机制是该保留、魔改还是直接删掉。
实验在 Coding(Terminal-Bench 2.1 到 4)、文本分类、Agentic Workspace 和工程设计四个领域做了验证:
- 跨数据集和跨模型(Opus 5.5 迁到 Gemini 3.8 Flash)的场景下,带完整 SIM 全面赢过只传 Harness 代码,也赢过只留问题根因不留修改证据(Problem-Only)的基线。Coding 领域 10 组独立配对实验里赢了 9 组,平均高出 2.36 分。
- 跨代际测试(Gemini 2.5 Flash -> 3.5 Flash -> 3.8 Flash -> 4 Argon)挺有意思:在 3.5 和 3.8 上,带着历史 SIM 继续优化比从头跑 Fresh RSI 效果更好;但到了 4 Argon,CRSI 反而比从头优化低了 0.8 分(94.8 vs 95.6)。这也侧面说明,当底层模型能力发生大幅跨代跃迁时,老一代模型留下的补丁经验收益会收敛,甚至可能有一点点历史包袱。
从工程视角看,这其实就是把「高质量的 Commit Message + 历史 Badcase 回归账本」结构化了,专门喂给 Meta-Agent 看。不过它也有个明显的工程边界:论文里每一轮都是把整份 SIM 全量塞进 System Prompt,在 10 轮的实验尺度下没问题,但如果放到真实生产环境长期跑几百上千轮,全量塞肯定会撑爆上下文,后续还是得配合目录索引或者按问题检索来做按需加载。
所属话题:Agent 工程