AI 不换模型,也能自己改进吗?

固定模型 → 读取改进记录 → 修改工具与流程 → 冻结后独立评测与迁移。

改进经验可以生成有用工具,部分作者实验同时提高成功率并降低执行费用;是否更好仍须冻结实现后按同一任务和成本口径验证。

作者实验,未独立复现。Verified为120题子集;38.5%仅为共同成功题执行费用降幅,搜索和事后评测另计;不代表无限持续进步。

本次变化:所有者选择今日报告1后发布:四个编号观点与对应论述、四张本站重绘/示意、固定模型/费用分母/反例与迁移边界。

方法、实验与证据

冻结后看效果与费用

机制
搜索结束后评测最后一代,区分尝试费用与共同成功费用。
条件/配置
Verified120题、Multilingual60题、Terminal2.1共89题。
报告结果
DeepSeek适应路线多语言68.3%→73.3%;共同成功题执行费用降低38.5%。
局限
个别路线退步;费用不含搜索,子集结果不能当作完整排行榜。

DeepSeek适应路线多语言成功率:73.3 % · 比较基线 初始Agent 68.3% · SWE-bench Multilingual抽样60题/8种语言;DeepSeek V4 Flash执行;10代;作者实验

共同成功题执行费用降幅:38.5 % · 比较基线 初始Agent在双方共同成功题上的执行费用 · DeepSeek适应路线/SWE-bench Multilingual;表10独立分母;不含搜索/事后评测费用

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第3.1–3.2节/表1;附录表10

关系与依据

这份报告的四个核心观点

  1. 模型权重不变,Agent的工具和做法仍能改进

    SelfSearch把改进对象放在指令、工具和执行逻辑上:读取前代记录,编辑并验证副本,再由新实现接棒下一轮。

  2. 重要的不只是一份新代码,还有改进过程留下的经验

    消融实验支持前代记录和改进者接棒的作用;工具演进案例显示,记录中的失败能变成下一代的具体修复目标。

  3. 部分实验能同时更准、更省,但收益有明确条件

    DeepSeek适应路线在60道多语言题中,成功率由68.3%升至73.3%;“节省38.5%”另指双方都解对的题上的执行费用。

  4. 改进后的工具能跨模型复用,稳定性仍需要更多验证

    作者在120道Verified题上换用执行模型,观察到跨模型复用收益;这支持工具实现具有可迁移性,但还不足以证明通用、持续的自我进化。

1. 模型权重不变,Agent的工具和做法仍能改进

这篇报告问的是:不在搜索期间反复跑下游题目、按分数筛选候选,Agent能否从“改进自己”的经历中找到有用变化?作者让Agent读取此前改进的过程记录,而不只是最终代码。记录包括推理、工具调用及结果、代码变化和本地检查。

前代记录交给当前Agent;当前Agent编辑并验证副本,本轮运行者不变;新实现接棒下一代。两条路线共享上一代记录,共运行10代。
图1 · SelfSearch改进流程(本站示意;模型权重与外部运行时固定) · 本站重绘/示意;数据与方法:Jungwoo Yang、Injin Kong、Yohan Jo / 首尔大学 · 图形 © FieldToFit;原始数据与方法归属见来源

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第2节/附录A:运行边界

  1. 改什么:可编辑仓库里的指令、工具、执行逻辑和代码组织;当前运行者在本轮内不变,编辑结果定义下一代。
  2. 怎么探索:能力路线寻找可复用工具和程序;适应路线关注失败、矛盾证据和策略调整。两条路线各自保留实现,共享上一代的两份记录。
  3. 何时评测:搜索中没有下游基准题目或评测结果;作者冻结搜索检查点后,才用下游任务评价最后一代。

适用边界:“无奖励搜索”仍使用工具反馈与本地检查,也仍需要事后评测;这里没有训练模型权重。

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第2节:改进轮次、两条路线与固定运行时

返回核心结论

2. 重要的不只是一份新代码,还有改进过程留下的经验

报告中最有启发的变化很具体:读取长记录时,输出截断会隐藏关键证据;一个工具修复后,下一轮又会暴露新的阅读或验证困难。这让“自我改进”有了可检查的工程过程。

初始81.7%;无前代记录83.8%;固定改进者83.8%;完整SelfSearch86.7%。完整方法比两种消融各高2.9个百分点。
图2 · 完整方法与两种消融(本站重绘;DeepSeek配置,120题,两条路线均值,横轴0–100%) · 本站重绘/示意;数据与方法:Jungwoo Yang、Injin Kong、Yohan Jo / 首尔大学 · 图形 © FieldToFit;原始数据与方法归属见来源

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第4.1节/表4:消融条件与均值

  1. 第6–7代(GPT配置):一条路线加入有输出上限的文本搜索,另一条加入结构化记录阅读器;下一代各自借鉴另一条路线的工具。
  2. 第8–10代(GPT配置):多个短摘录合起来仍可能过长,因此加入总输出限制,再补事件过滤、工具名查找、调用参数与结果配对。
  3. 一个修复案例(DeepSeek配置):第5代保留长行首尾,匹配内容落在中间时被隐藏;第6代改为围绕匹配位置摘录,第7代另一条路线复现问题、采用修复并验证。
  4. 消融怎么读:无记录版本仍会累积代码;固定改进者版本仍会读取记录、编辑最新实现。完整方法均值更高,支持两者共同作用,但部分单条路线结果仍有差异。

关键证据:工具的作用也分层:文本搜索和按行阅读被用于下游任务;GPT记录阅读器未在下游调用,它主要支持继续改进的过程。

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第4.1–4.3节:消融、逐代变化与下游工具复用

返回核心结论

3. 部分实验能同时更准、更省,但收益有明确条件

报告测试了两种模型配置、三个基准。两条最终路线的平均成功率在六个模型—基准设置中均高于初始Agent;具体到单条路线,效果与费用并不总是一起改善。

DeepSeek初始/能力/适应成功率68.3/66.7/73.3%;平均执行费用0.0521/0.0321/0.0332美元每次尝试。38.5%为共同成功题上的另一项费用降幅。
图3 · 多语言实验的成功率与费用(本站重绘;平均尝试费用与共同成功费用分开表达) · 本站重绘/示意;数据与方法:Jungwoo Yang、Injin Kong、Yohan Jo / 首尔大学 · 图形 © FieldToFit;原始数据与方法归属见来源

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 表1:平均每次尝试;表10:共同成功题执行费用

  1. 评测范围:SWE-bench Verified是120题子集;SWE-bench Multilingual抽样60题、覆盖8种编程语言;Terminal-Bench 2.1使用全部89题。不能当作完整Verified排行榜。
  2. 模型配置:GPT搜索用gpt-5.6-sol、执行用gpt-5.6-luna,均为medium推理;DeepSeek搜索用deepseek-v4-pro-0813、执行用deepseek-v4-flash-0731。同一配置的初始与改进Agent保持执行模型及限制一致。
  3. 费用分母:表1平均费用包括失败的尝试;38.5%来自初始与适应Agent共同解对的题,不能从表1的0.0521与0.0332直接算出。两项均为执行模型费用,搜索与事后评测另计。
  4. 反例也要看:DeepSeek能力路线的多语言成功率由68.3%降到66.7%;GPT能力路线在Terminal-Bench成功率提高,但平均执行费用增加3.1%。

适用边界:73.3%比68.3%高5个百分点。38.5%不是总体研发成本降幅,也不是所有任务、模型或真实业务的费用承诺。

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第3.1–3.2节/表1;附录D.2/表10:费用分母

返回核心结论

4. 改进后的工具能跨模型复用,稳定性仍需要更多验证

如果改进只对生成它的模型有用,工具价值会很受限。作者把搜索得到的实现冻结后,交给另一模型执行,不再重新搜索。这是一项关于工具与程序可迁移性的实验。

GPT执行初始75.0%,采用DeepSeek搜索的能力/适应实现为79.2/76.7%;DeepSeek执行初始81.7%,采用GPT搜索实现为83.3/85.0%。
图4 · 固定实现后的跨模型执行(本站重绘;120题成功率,能力/适应路线分别记录) · 本站重绘/示意;数据与方法:Jungwoo Yang、Injin Kong、Yohan Jo / 首尔大学 · 图形 © FieldToFit;原始数据与方法归属见来源

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第3.4节/表3:搜索模型与执行模型分开

  1. 迁移结果:DeepSeek搜索得到的能力路线交给GPT执行,成功率75.0%→79.2%;GPT搜索得到的适应路线交给DeepSeek执行,81.7%→85.0%。这两组比较都来自相同120题设置。
  2. 仍缺什么:独立重复搜索能否稳定得到收益,更多模型、任务与真实环境是否有效,报告均未充分回答;作者也明确提出需要研究独立搜索的稳定性。
  3. 本站解读:更值得借鉴的是保存可定位的过程记录,把失败变成具体工具修复,再冻结候选并独立评测。能修改自己,只是候选生成能力;是否值得使用,还要看任务结果与总成本。

适用边界:搜索在无网络的隔离容器中、固定资源边界下运行;本文整理作者实验,FieldToFit未独立复现。

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · 第3.4节/表3:跨模型迁移;第6节:稳定性与后续研究

返回核心结论

报告与日期

SelfSearch: Reward-Free Search for Self-Improving Agents · arXiv v2 · arXiv 2609.37968v2 · 2026-09-30 · 首次发布 2026-09-29 · 报告修订 2026-09-30 · 读取v2;未对v1逐项对比,不将v2登记为已核实的实质更新。

地图首次发布 2026-10-10T08:46:02.146079+00:00 · 地图修订 2026-10-10T08:46:02.146079+00:00