新闻详情

新闻详情

首页 / 资讯中心 / 详情

RT-2:把机器人动作当成“外语单词“——让网络知识直接长成操作技能

发布时间:2026/10/1 10:13:24来源:尧图网络
RT-2:把机器人动作当成“外语单词“——让网络知识直接长成操作技能
RT-2:把机器人动作当成"外语单词"——让网络知识直接长成操作技能原文:RT-2: Vision-Language-Action Models Transfer Web Knowledge to Robotic Control作者:Anthony Brohan, Noah Brown, Justice Carbajal … Brianna Zitkovich(Google DeepMind,作者按字母序)arXiv:2307.15818v1 [cs.RO] · 项目页:robotics-transformer2.github.io图 1:RT-2 总览——把机器人动作表示为"另一种语言",动作可以被编码成文本 token 并与其他自然语言 token 一起,由同一个视觉语言模型自回归地输出。RT-2 的想法非常"暴力"却很优雅:把机器人动作离散成 256 个桶、直接占用词表里的 256 个 token,于是 VLM 预训练里学到的语义与视觉概念,可以顺着"下一个 token 预测"这条老路流进机器人的动作输出。结果是机器人会做没被教过的事(把草莓放进"同类水果"的碗里、挑出"快掉下桌子"的那个袋子),并且在 6k 次真实机器人评测中把泛化成功率做到基线的约 2~6 倍。
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

DEiT图像分类实战:小数据集上高效训练Transformer模型 2026/10/1 11:02:47

DEiT图像分类实战:小数据集上高效训练Transformer模型

简介:DEiT实战资源以Facebook提出的DeiT模型为核心,面向想在图像分类任务中应用Transformer的深度学习开发者,尤其适合已掌握PyTorch基础、希望深入理解蒸馏训练技巧的读者。压缩包共2445个文件,以2437张png图表为主,辅…

阅读更多 →
FRI 与 KG-TOWER 二次开发教程(08):KG-TOWER 数据面——输入输出、PRO/II 工具与报表取数 2026/10/1 11:02:47

FRI 与 KG-TOWER 二次开发教程(08):KG-TOWER 数据面——输入输出、PRO/II 工具与报表取数

FRI 与 KG-TOWER 二次开发教程(08):KG-TOWER 数据面——输入输出、PRO/II 工具与报表取数版本与事实声明 KG-TOWER 版本口径 v5.4.x(注册页 v5.4.6,2025-01-14;requirements 页 v5.4.5)&#xf…

阅读更多 →
FRI 与 KG-TOWER 二次开发教程(09):FRI 数据资产怎么用——公开可复现与必须依赖会员许可的边界 2026/10/1 11:02:34

FRI 与 KG-TOWER 二次开发教程(09):FRI 数据资产怎么用——公开可复现与必须依赖会员许可的边界

FRI 与 KG-TOWER 二次开发教程(09):FRI 数据资产怎么用——公开可复现与必须依赖会员许可的边界版本与事实声明 FRI 的 Device Rating Program (DRP) 无公开版本号;其关联式与两本 Handbook 内容属会员权益,公开渠道无…

阅读更多 →
基于海康威视摄像头与OpenCV的人体识别:RTSP拉流到检测落地全攻略 2026/10/1 11:02:34

基于海康威视摄像头与OpenCV的人体识别:RTSP拉流到检测落地全攻略

简介:基于海康威视网络摄像头与OpenCV的人体识别项目,面向计算机视觉课程设计、毕业设计及OpenCV入门进阶学习者。项目实现了从海康摄像头实时采集、YV12到RGB色彩空间转换,到HOGSVM人体检测的完整流程,主体代码以C编写&#xff0…

阅读更多 →
yumdownloader报错no such table packages?根源在sqlite缓存损坏 2026/10/1 11:02:34

yumdownloader报错no such table packages?根源在sqlite缓存损坏

上周帮一台 CentOS 7.9 的构建机排查源码包下载问题,现象不复杂,但错误的抽象程度让人印象深刻:执行yumdownloader --source想拉某个软件的 src.rpm 时,命令直接甩出一句Error: no such table: packages。当时我第一反应是软件源配…

阅读更多 →
3GPP TR 38.901信道建模实战:毫米波仿真避坑与CDL/TDL落地 2026/10/1 11:02:27

3GPP TR 38.901信道建模实战:毫米波仿真避坑与CDL/TDL落地

简介:3GPP TR 38.901-e30是面向5G通信系统研发与标准化工作的核心信道建模技术报告,适用于无线通信标准研究者、基站/终端厂商射频工程师、高校通信专业高年级学生及科研人员,用于支撑毫米波频段(0.5–100 GHz)下New R…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞 ✉