新闻详情

新闻详情

首页 / 资讯中心 / 详情

COBRA‑Skills:基于上下文赌博机引导进化的智能体技能优化框架

发布时间:2026/10/1 2:43:30来源:尧图网络
COBRA‑Skills:基于上下文赌博机引导进化的智能体技能优化框架
COBRA‑Skills:基于上下文赌博机引导进化的智能体技能优化框架原文网页:https://arxiv.org/html/2609.11682v1摘要大语言模型智能体可以利用从历史任务经验中蒸馏得到的可复用技能提升性能。但现有的技能优化方法往往开销巨大,需要大量基于执行的评估与海量任务样本。本文提出COBRA‑Skills高效框架:将技能优化建模为在动态演化候选空间上带预算约束的序列优化问题。COBRA‑Skills结合上下文赌博机优先排序与证据驱动的技能进化,选择性地把评估资源分配给高潜力、高信息增益的候选技能,同时利用执行反馈持续迭代优化技能种群。在6个异构智能体基准、3个目标大模型上开展实验:对比SkillOpt基线,COBRA‑Skills优化开销降低55‑58%;每个基准仅使用50条独立优化样本即可取得最优平均性能。额外实验表明,该框架在不同智能体执行脚手架下具备鲁棒性;也支持直接使用目标模型自身完成技能生成与迭代(自教学模式)。关键词大模型智能体、智能体技能、上下文多臂赌博机、技能进化、样本高效优化目录引言相关工作方法3.1 问题定义3.2 COBRA‑Skills整体流程3.3 上下文赌博机:候选技能优先排序3.4 证据驱动进化算子3.4.1 再生算子 Regeneration3.4.2 轨迹变异算子 Rollout (\mathcal{M})utation3.4.3 交叉算子 Crossover实验4.1 实验配置4.1.1 评测基准4.1.2 模型设置4.1.3 对比基线4.1.4 实现与评测协议4.2 主要实验结果4.2.1 整体性能4.2.2 优化开销与样本效率4.2.3 跨智能体脚手架泛化4.2.4 优化动态过程消融实验5.1 赌博机模块、进化模块有效性5.2 对教学模型的依赖(自教学模式)5.3 跨模型技能迁移5.4 探索‑利用权衡超参数(\nu)敏感性相关工作6.1 智能体技能与技能优化6.2 用于自适应优化的赌博机算法结论参考文献附录A 实验完整配置A.1 COBRA‑Skills超参数完整配置A.2 基线实现细节A.3 各个基准数据集细节附录B 补充实验结果B.1 优化开销计算B.2 自教学模式完整结果B.3 多checkpoint中间结果附录C Prompt模板脚本C.1 再生算子PromptC.2 轨迹变异算子PromptC.3 交叉算子Prompt1 引言智能体技能(Agent Skill)是从历史任务经验中蒸馏出的可复用过程化知识;以文本SKILL.md形式注入智能体系统提示,改变大模型推理行为。现有工作Trace2Skill、SkillOpt依靠大量轨迹样本、频繁执行评估迭代进化技能,存在两大痛点:评估开销昂贵:每一条候选技能都需要在大量任务样本上执行智能体,token与API成本很高;样本需求量大:需要大量训练样本,资源受限场景难以落地。本文提出COBRA‑Skills,核心思路:将技能优化建模为带预算约束的上下文赌博机序列决策问题;把每一条候选技能当作赌博机臂,技能语义Embedding作为上下文特征;结合神经网络奖励预测器+LinearUCB置信上界,平衡探索‑利用,优先评估高潜力、高不确定的候选,减少无效评估;设计证据驱动的进化算子:再生、轨迹变异、交叉,周期性更新技能种群;全部进化修改基于真实执行轨迹证据,避免无依据空想。本文贡献将智能体技能优化建模为预算受限、动态候选空间下的上下文赌博机序列优化问题;实现COBRA‑Skills框架:上下文赌博机优先排序 + 证据驱动技能进化算子;在6个异构智能体基准、3个目标模型完成评测,相比SkillOpt,开销降低55‑58%,仅用每个基准50条优化样本取得更优性能;消融验证各模块作用;验证自教学模式、跨脚手架、跨模型技能迁移能力;公开代码仓库。2 相关工作2.1 智能体技能与技能优化智能体技能将可复用流程、启发式规则封装为文本,注入系统提示,无需微调模型参数。Trace2Skill:从失败/成功轨迹蒸馏技能;SkillOpt:迭代反射编辑、进化优化技能;CoEvoSkills、(\mathcal{M})eta‑Skills:协同进化、记忆库等方案。现有方法大多不做评估资源分配,对全部候选无差别执行评估,开销高。COBRA‑Skills重点解决评估资源预算约束,使用上下文赌博机做候选筛选。2.2 赌博机算法用于自适应优化上下文多臂赌博机(Contextual Bandit),臂带有上下文特征,平衡探索‑利用,广泛用于Prompt优化、超参数调优。COBRA‑Skills将技能Embedding作为上下文特征;不仅用于选择待评估候选,还利用得分做种群修剪,和证据进化算子闭环联动。3 方法3.1 问题定义目标模型KaTeX parse error: Can't use function '\(' in math mode at position 10: \mathcal{\̲(̲\mathcal{M}\)};任务分布KaTeX parse error: Can't use function '\(' in math mode at position 10: \mathcal{\̲(̲\mathcal{D}\)};优化集KaTeX parse error: Can't use function '\(' in math mode at position 10: \mathcal{\̲(̲\mathcal{D}\)}_…:小规模带预算样本集合;测试集KaTeX parse error: Can't use function '\(' in math mode at position 10: \mathcal{\̲(̲\mathcal{D}\)}_…用于泛化评估;技能s ss:文本SKILL.md,注入系统提示改变KaTeX parse error: Can't use function '\(' in math mode at position 10: \mathcal{\̲(̲\mathcal{M}\)}行为;优化目标:从有限预算中,得到技能s ∗ s^*
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

Prometheus+Grafana生产级部署实战指南 2026/10/1 3:30:44

Prometheus+Grafana生产级部署实战指南

1. 这不是“装个软件”,而是一套可观测性基础设施的落地起点 Prometheus 和 Grafana 这两个词,最近两年在运维、SRE、云原生开发甚至测试工程师的日常沟通里出现频率高得离谱。但很多人点开教程,第一眼看到“下载二进制包”“解压”“改配置…

阅读更多 →
GitHub代码上传全流程:从Git安装到push报错排查 2026/10/1 3:30:43

GitHub代码上传全流程:从Git安装到push报错排查

1. 先建立正确的认知:上传不是"传文件",而是"同步提交记录"1.1 GitHub 到底在帮你做什么很多人第一次接触 GitHub 是从"上传代码"开始的。你用 GitHub 下载过别人项目的源码,觉得很简单,等到自己要…

阅读更多 →
旅游景点评论方面级别情感分析:语料库构建到BERT微调完整实践 2026/10/1 3:30:43

旅游景点评论方面级别情感分析:语料库构建到BERT微调完整实践

简介:面向Python毕业设计与课程设计场景,这份资源以旅游景点评论为对象,实现方面级别情感分析,将语料库、模型训练与Django Web展示整合一体,适合具备Python基础、需要完成NLP方向选题的计算机专业学生。压缩包大小70.…

阅读更多 →
HarnessRouter Plugins 与 MCP 详解:Browser、GitHub、Vercel 如何装进一个 Agent 2026/10/1 3:30:37

HarnessRouter Plugins 与 MCP 详解:Browser、GitHub、Vercel 如何装进一个 Agent

HarnessRouter Plugins 与 MCP 详解:Browser、GitHub、Vercel 如何装进一个 Agent 【免费下载链接】harnessrouter HarnessRouter Community Edition: the self-hosted, Apache-2.0 edition of the unified interface for agent harnesses. Run Codex, Claude Code,…

阅读更多 →
Python DLL加载失败的根源与系统级解决方案 2026/10/1 3:30:30

Python DLL加载失败的根源与系统级解决方案

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

阅读更多 →
1DCNN直接处理原始脑电:从时间序列分类到癫痫发作检测的端到端实践 2026/10/1 3:30:30

1DCNN直接处理原始脑电:从时间序列分类到癫痫发作检测的端到端实践

简介:面向脑电信号处理与癫痫检测任务的一维卷积神经网络(1DCNN)代码包,适合生物医学工程、深度学习方向的研究者与开发者,用于对原始时序脑电信号进行特征提取与分类建模。压缩包仅含1个Python脚本,体积2K…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞 ✉