新闻详情

新闻详情

首页 / 资讯中心 / 详情

谷歌WikiSkill论文精读:模型可以换经验留下来,9B反超27B

发布时间:2026/9/29 20:04:51来源:尧图网络
谷歌WikiSkill论文精读:模型可以换经验留下来,9B反超27B
谷歌 WikiSkill 论文深读模型可以换经验留下来9B 反超 27B调研日期2026-09-28 · 论文WikiSkillarXiv 2608.27454Google Research 弗吉尼亚理工 2026-08 发布公众号上读到一篇讲「谷歌 WikiSkill」的文章一个 90 亿参数模型带上从任务成败中反复修订的技能在五项基准上平均 47.4%跑赢了没有技能加持的 270 亿参数模型39.4%——**模型权重没变做事的方法变了。**这类把经验沉淀成 Agent 技能的论文这几年很热但 WikiSkill 的价值在于它真正把经验做成了可独立、持续更新的知识层。我把论文全文核对了一遍这篇是完整解读。一、核心结论经验果然「存得下来、能反超、还能继承」论文来自 Google Research 与弗吉尼亚理工大学2026-08-27 发布arXiv 2608.27454标题即《WikiSkill: Compiling Agent Experience into Persistent…》。一句话先针对不同任务离线演化技能再让 Agent 带着这些方法接受测试。观测数据9B 带技能 vs 27B 无技能47.4% vs 39.4%5 基准平均9B 无技能自身对照未达标基线27B 也带技能63.3%更强模型同样受益Qwen 系列增益4B 12.3、9B 17.5、27B 23.9 个百分点电子表格最突出27B 从 40.8% →81.7%约两倍研究覆盖数学推理、网页搜索、电子表格、长文档问答、文本家务模拟五类技能按每项基准分别演化训练/验证/测试互不重叠每种配置从空技能集跑三次取平均。二、经验三层结构Raw → Wiki → Skills论文把积累经验落成了三层明确存储层级存什么谁用Raw不可改写的执行轨迹供回溯演化环节查证Wiki错误模式、有效策略、修改历史持续整理提议者分析、维护Skills当前采用的完整工作方法SKILL.md 脚本 参考执行 Agent三个 Agent 分工执行者按当前技能做任务维护者对照成功/失败轨迹检查具体操作与错误原因提议者查阅 Wiki 原始记录基于标准答案与成败摘要提出修改。默认配置里执行 Agent 用 SkillsWiki 供演化分析。三、技能会退、教训不退的迭代机制论文最有意思的一段是在 ALFWorld 文本家务模拟里Qwen 反复取物、检查、移动一直不推进。第 0 轮提了个宽泛的目标导向行动技能验证没提高即被拒第 1 轮参考失败记录改成更具体的防循环规则“不要把物品放回原来的位置”通过验证第 4 轮再补充同一物品同一操作只执行一次。规则管理很清晰每轮只对单个技能做新增或局部修改放独立验证集评估分数必须严格超过历史最佳才接受打平或下降就回退。但 Wiki 不随技能回滚——修改内容、验证分数、接受/拒绝结果都保留为下一轮留下线索。这解释了为什么网页搜索任务里 28% 的获准修改出现在第 5–7 轮前期积累仍能催生有效新方法。四、经验真能跨模型传吗既能也会传错论文做了直接交换实验双向都有结论任务·执行模型自身技能换用其它模型技能ALFWorld · Qwen-9B63.4%用 27B 技能70.2%数学 · Gemma-31B56.7%用 4B 技能73.1%表格 · Gemini-Flash无技能 50.5%用 4B 技能18.1%明显倒退长文档问答里更典型4B 用自己演化的技能从 30.2% - 28.5%同一套技能交给 27B 却从 42.1% 升到 52.9%。发现有用方法和把方法执行到位是两种能力。但表格任务的负迁移也提醒4B 为了避免错误发展出的单行 Python、字符串转换等具体补丁反而限制了 Gemini 用完整脚本——经验含可复用方法和为某模型量身定做的补丁换执行者必须重新验证。五、局限性论文自己的坦诚验证集每项只有 10–40 题距离真实工作长期稳定进化还有距离实验把当前技能全文直接放进 prompt没检验技能库扩大后的检索与触发只接受立即提分的修改可能放弃有助于后续改进的铺垫Wiki 无自动修剪机制长期运行怎么处置冗余/过期知识未知成本不低每轮仅维护 Wiki 提修改就约 11–21 次模型调用数小时、数百次环境操作的超长任务尚未覆盖关联与启发WikiSkill 的Raw→Wiki→Skill三层结构和我一直在做的人持久化知识库思路高度同构都主张先把经验编译成独立、持续更新的知识再沉淀为可复用技能。Karpathy 的 LLM Wiki 思路保留已整理知识让后续工作接着前面积累往下做在这篇论文里有了更工程化的落地。一句话结论WikiSkillarXiv 2608.27454Google 弗吉尼亚理工用「原始轨迹 → 经验 Wiki → 执行技能」三层结构 三 Agent 分工 严格验证/回退把 Agent 经验首次做成可查证、可继承、可跨模型复用的知识资产9B 反超 27B 实证了经验本身也是竞争力但离生产级还有检索、修剪、长任务、成本四道坎——方向正确价值在经验货币化这个命题。局限依据是论文 多篇知乎/技术博客交叉未复现实验无 GPU 环境跑 9B/27B未做本机 demo论文为研究性工作无可直接运行的可复现工程包具体单任务数据来自论文表非本机实测下一篇预告我把 WikiSkill 的「Raw→Wiki→Skill」理念映射到日常 Agent 工作流写一份普通人也能用上的「Agent 经验沉淀」落地模板。
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

无源温感芯片:免供电UHF RFID温度监测从原理到部署 2026/9/29 20:52:09

无源温感芯片:免供电UHF RFID温度监测从原理到部署

1. 一颗不用电池的温度哨兵,到底解决了什么痛点温度监测这件事,听起来简单,做起来全是坑。做过冷链物流、仓储管理、电力设备巡检或者食品医药行业的朋友应该都有体会:想监控一个环境或者一台设备的温度,传统方案无非两…

阅读更多 →
风机叶片缺陷检测数据集 | 风机叶片 缺陷检测 风电运维 无人机巡检 细粒度分类9126期 2026/9/29 20:52:09

风机叶片缺陷检测数据集 | 风机叶片 缺陷检测 风电运维 无人机巡检 细粒度分类9126期

风机叶片缺陷检测数据集 | 风机叶片 缺陷检测 风电运维 无人机巡检 细粒度分类9126期 数据集概述 本数据集专注于风机叶片表面缺陷的视觉检测与分类,服务于风电运维、无人机巡检及能源设施管理。数据涵盖九类典型叶片缺陷,适配缺陷识别、维护决策及自动…

阅读更多 →
ECU故障码不是结论,而是线索:从数据流到根因的实战诊断指南 2026/9/29 20:52:09

ECU故障码不是结论,而是线索:从数据流到根因的实战诊断指南

仪表盘上的黄色故障灯一亮,九成车主第一反应是开去修理店,然后盯着诊断仪屏幕上那些P开头的代码发懵。干这行十来年,我接过的返工车里,至少三成都是因为“读码后瞎换件”造成的——报了P0171就往死里换氧传感器,报了P0…

阅读更多 →
为什么PDF转Excel时表格会错乱(以及如何修复) 2026/9/29 20:52:09

为什么PDF转Excel时表格会错乱(以及如何修复)

你将一份12页的财务报告导出到Excel,打开结果后,原本漂亮的季度表格变成了一列800行的表格。数字还在——只是不知在哪儿——但每个数字现在都变成了文本字符串,列标题每20行重复一次,而且一个总计值还跑到了右边两列的单元格里。…

阅读更多 →
单选框和复选框如何美化 2026/9/29 20:52:09

单选框和复选框如何美化

登录要勾协议、问卷要选一项,浏览器自带的方框圆点难看还难统一。做法是:原生 checkbox / radio 还在,负责取值和提交;看得见的圆点、对勾用旁边的 label 或 span 画,靠 :checked 换样子。 入口是 index.html&#xff…

阅读更多 →
从T+1到分钟级:湖仓一体在大厂的真实落地收益对照(携程/网易云信/腾讯) 2026/9/29 20:52:03

从T+1到分钟级:湖仓一体在大厂的真实落地收益对照(携程/网易云信/腾讯)

从T1到分钟级:湖仓一体在大厂的真实落地收益对照(携程/网易云信/腾讯) 一、先说结论:收益对照比架构图更难 湖仓一体、流式湖仓的架构文章已经不稀缺。公开可见的工程分享里,Flink 与 Paimon/Fluss 组合承担流式入湖&a…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞 ✉