新闻详情

新闻详情

首页 / 资讯中心 / 详情

DENSE:将智能体轨迹提炼为面向自我改进的证据驱动捷径树

发布时间:2026/11/15 12:41:45来源:尧图网络
DENSE:将智能体轨迹提炼为面向自我改进的证据驱动捷径树
DENSE:将智能体轨迹提炼为面向自我改进的证据驱动捷径树arXiv编号:arXiv:2609.21423v1 [cs.AI]摘要线上部署的大模型智能体会产出海量执行轨迹,但任务专属验证器、专家标注成本高昂,难以大规模获取。本文研究:在没有事后任务结果标签的前提下,如何从原始轨迹中提炼可复用反馈信息,利用轨迹内部的局部进展、故障恢复、未完成需求等证据。提出DENSE(Distilling Evidence from Nested Subtask Executions,从嵌套子任务执行中提炼证据),将轨迹证据组织为证据驱动嵌套捷径树。DENSE压缩冗余尝试,利用恢复证据跨层级调和各类问题;对已完成分支做摘要,同时对未解决分支做展开;把可复用进展与剩余待完成义务建立关联。本文同时提出REFIT评测协议:源轨迹配对评测,在看不到事后任务结果标签的条件下对比不同反馈;重置环境与模型上下文,使用反馈对同一任务重新发起尝试。在Terminal‑Bench 2.1基准上,DENSE在四款被测接收模型上,在所有非特权反馈方法中取得最高严格通过率。相对原始首轮执行,严格通过率提升7.12‑15.64个百分点;重跑时接收方模型token观测消耗降低19.0‑43.6%。基于GPT‑5.5的消融实验证实:嵌套子任务分析、捷径构建、问题调和三者组合才能拿到完整增益。实验表明,可以依靠证据驱动的轨迹复用来实现智能体自我迭代,降低对外部监督的依赖。关键词智能体轨迹蒸馏;自我改进;嵌套子任务;捷径树;无标签反馈;REFIT协议;Terminal‑Bench目录引言DENSE:证据驱动的捷径树2.1 问题设定与总览2.2 构建嵌套子任务2.3 带证据的尝试过程压缩2.4 通过恢复证据调和问题2.5 渲染未完成需求义务REFIT:评估轨迹信息价值3.1 配对重跑实验3.2 可用信息定义3.3 下游效用指标实验4.1 实验设置4.1.1 任务4.1.2 接收方模型4.1.3 执行配置4.1.4 反馈生成模型4.1.5 评测指标与覆盖率4.2 对比方法4.3 任务性能结果4.4 消融实验
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

【外设】之大彩串口显示屏 2026/11/15 4:54:16

【外设】之大彩串口显示屏

大彩串口屏初步使用 1 .官网下载 STM32 屏幕 GUI 设计资料 http://www.gz-dc.com/category/typeid/4112 找到 STM32 Keil 工程,移植相关代码因项目而异进行移植,由于项目简单,本人只对用到的指令接口进行修改。 比如:注意事项&…

阅读更多 →
无法下载Windows系统iso文件 2026/11/15 2:04:12

无法下载Windows系统iso文件

当我遇到这个问题的时候,我打开了一个网站: 登录 然后我打算下载的时候: 突然那个官方的连接就可以下载了:

阅读更多 →
【清华代码熊】DeepSeek V4.1 Flash 后训练详解 2026/11/14 10:11:15

【清华代码熊】DeepSeek V4.1 Flash 后训练详解

📌 上期解析了 DeepSeek V4.1 Flash 模型架构改进,本期解析 DeepSeek V4.1 Flash 预训练/后训练技术: 🌟 预训练:45T 文本 多模态混合语料、直接训练 sparse attention(取消 DeepSeek V4 的 dense 冷启动&…

阅读更多 →
Shuffle-R1: Efficient RL framework for Multimodal Large Language Models via Data-centric Dynamic ... 2026/11/14 17:14:38

Shuffle-R1: Efficient RL framework for Multimodal Large Language Models via Data-centric Dynamic ...

文章主要内容和创新点 主要内容 本文聚焦于多模态大语言模型(MLLM)强化学习(RL)训练中的效率问题,提出了一个名为Shuffle-R1的框架。研究发现,当前RL训练存在两个关键缺陷: 优势值坍缩(Advantage Collapsing):批次中大多数优势值集中在零附近,导致有效梯度信号被淹…

阅读更多 →
PRvL: Quantifying the Capabilities and Risks of Large Language Models for PII Redaction 2026/11/14 16:35:50

PRvL: Quantifying the Capabilities and Risks of Large Language Models for PII Redaction

一、文章主要内容总结 本文聚焦于利用大型语言模型(LLMs)实现个人身份信息(PII)脱敏的研究,旨在解决传统脱敏方法(如基于规则的系统、领域特定命名实体识别(NER)模型)泛化能力差、跨格式/跨语境适应性弱的问题。 研究通过全面评估多种LLM架构(包括密集型LLM(D-LLM…

阅读更多 →
LLaVA-RE: Binary Image-Text Relevancy Evaluation with Multimodal Large Language Model 2026/11/15 4:06:36

LLaVA-RE: Binary Image-Text Relevancy Evaluation with Multimodal Large Language Model

文章主要内容和创新点 主要内容 本文聚焦于二进制图像-文本相关性评估任务(判断图像与文本“相关”或“不相关”),针对该任务中文本格式多样、相关性定义随场景变化等挑战,提出了基于多模态大语言模型(MLLM)的解决方案LLaVA-RE。 模型设计:LLaVA-RE基于LLaVA 1.5架构,…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞 ✉