新闻详情

新闻详情

首页 / 资讯中心 / 详情

VLA 机器人策略 5 步跑通:openpi 从克隆到首次推理

发布时间:2026/9/12 16:27:36来源:尧图网络
VLA 机器人策略 5 步跑通:openpi 从克隆到首次推理
VLA 机器人策略 5 步跑通openpi 从克隆到首次推理【免费下载链接】openpi项目地址: https://gitcode.com/GitHub_Trending/op/openpi它替你解决了什么训练一个机器人策略算力贵、数据门槛高部署链路还长哪一环都能卡住你几周。Physical Intelligence 开源的 openpi 把预训练 VLA 模型、微调脚手架和推理代码一次打包给你。所有基础检查点都在 10,000 小时以上的机器人数据上预训练过首次运行会自动下载并缓存到本地~/.cache/openpi。你既能直接推理也可以拿到自己的数据上微调。如果你只想在现成模型上做 few-shot 微调往下看就够。两类模型速览项目里主打两类模型区别在于它们怎么说话给机器人维度π₀π₀-FAST模型范式流式扩散自回归预训练数据10,000 小时同左典型用途多任务基础策略轻量快速推理选型建议只做演示、教学选 FAST追求动作流畅度选 π₀。数据流本身不复杂相机图像加语言指令进模型模型吐出一串动作再发给机器人执行。整条链路就三个角色数据、模型、动作。除了基础模型仓库还发布了一批针对 DROID、ALOHA 等平台微调过的专家检查点部分能在新场景里 0-shot 直接跑先拿来试水再决定要不要微调检查点适用平台能干什么π₀-FAST-DROIDDROID桌面简单操作新场景 0-shotπ₀-DROIDDROID推理更快语言跟随稍弱π₀-ALOHA-towelALOHA0-shot 折叠各种毛巾π₀-ALOHA-tupperwareALOHA打开饭盒取食π₀.₅-LIBEROLIBERO 仿真仿真基准上成绩领先从零到跑通核心操作区确认环境底线先确认机器有底子再动手装东西。Ubuntu 22.04 加一块 NVIDIA GPU推理 8GB 显存起步LoRA 微调到 22.5GB全参微调直接上 A100、H100 这一档。拉取代码openpi 快速上手先把整个仓库拉下来第三方机器人代码在子模块里记得带上。git clone --recurse-submodules https://gitcode.com/GitHub_Trending/op/openpi.git git submodule update --init --recursive第二条是给已经克隆过仓库的别漏掉。安装依赖openpi 安装用 uv 一把装好 Python 环境两行命令收工。GIT_LFS_SKIP_SMUDGE1 uv sync GIT_LFS_SKIP_SMUDGE1 uv pip install -e .GIT_LFS_SKIP_SMUDGE1会在安装时跳过 LFS 大文件LeRobot 依赖才能顺利拉下来。系统环境乱掉的话直接切 Docker 方案看docs/docker.md。验证环境可用确认包能加载、依赖齐全。uv run python -c import openpi, openpi_client; print(ok)没报错并打印 ok这一段就算跑通。两个高频场景加载预训练模型做 VLA 模型推理场景 A手上没有机器人也能先把链路跑起来examples/simple_client目录里有个脚本会发一个随机观测做推理适合第一次验证。pi0_fast_droid是目前开箱即用的配置改个 prompt 就能跑from openpi.training import config as _config from openpi.policies import policy_config from openpi.shared import download config _config.get_config(pi0_fast_droid) ckpt download.maybe_download(gs://openpi-assets/checkpoints/pi0_fast_droid) policy policy_config.create_trained_policy(config, ckpt) example {observation/exterior_image_1_left: ..., prompt: pick up the fork} policy.infer(example)[actions]注意 example dict 的 key 必须对齐 LeRobot 数据集字段图像和动作空间才会对得上。用自己的数据做 π₀ 微调场景 B不贴训练脚本三步走就能完成转数据把数据转成 LeRobot 格式照着examples/libero/convert_libero_data_to_lerobot.py改一个转换脚本即可。关键配置是LeRobotLiberoDataConfig定义原始数据怎么进训练。跑训练复制一个现成的TrainConfig改掉数据路径和超参执行uv run scripts/train.py加你的 config 名。关键项是weight_loader决定加载哪份预训练权重。起服务训练完跑uv run scripts/serve_policy.py服务监听 8000 端口关键项是--policy.dir指向你要用的那轮 checkpoint。下一步往哪走给别的机器人平台微调仓库里 DROID、ALOHA、UR5 各有可跑的示例参考 examples/droid/README_train.md。用 WebSocket 部署远程推理模型放算力强的服务器机器人端只发观测、收动作参考 docs/remote_inference.md。接入 LeRobot 数据集工具链数据转换、norm stats 都齐了之后微调就剩改配置参考 scripts/compute_norm_stats.py。跑通上面的流程后把数据换成你自己的任务基本就是一个可用的策略原型。【免费下载链接】openpi项目地址: https://gitcode.com/GitHub_Trending/op/openpi创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

SpringBoot书商城管理系统设计与实现 2026/9/12 17:12:47

SpringBoot书商城管理系统设计与实现

1. 项目概述:SpringBoot书商城管理系统这个基于SpringBoot的书商城管理系统是一个典型的B2C电商平台,专为图书销售场景设计。我在实际开发中发现,图书类电商与传统综合电商相比有几个显著特点:SKU属性相对固定(ISBN、出…

阅读更多 →
RK3588工业边缘部署:ARM+FPGA+NPU协同设计与宽温可靠实践 2026/9/12 17:12:47

RK3588工业边缘部署:ARM+FPGA+NPU协同设计与宽温可靠实践

1. RK3588不是一块“板子”,而是一套工业级边缘智能的系统性解法 RK3588,这个词最近在工控、机器视觉、电力巡检、车载终端和智能仓储的工程师群里出现频率越来越高。它不再只是“国产ARM芯片”这个模糊标签下的一个型号,而是实实在在地被焊进…

阅读更多 →
5 分钟读懂 Midscene:用 AI 视觉自动化测试打通 Web 与移动端的完整指南 2026/9/12 17:12:47

5 分钟读懂 Midscene:用 AI 视觉自动化测试打通 Web 与移动端的完整指南

5 分钟读懂 Midscene:用 AI 视觉自动化测试打通 Web 与移动端的完整指南 【免费下载链接】midscene GUI Agent for E2E Testing 项目地址: https://gitcode.com/GitHub_Trending/mid/midscene 周五傍晚,一个只在安卓端复现的 UI 回归问题堵住了发…

阅读更多 →
STM32智能家居照明系统:PWM调光与ESP8266远程控制实战 2026/9/12 17:12:47

STM32智能家居照明系统:PWM调光与ESP8266远程控制实战

简介:毕设&课程作业_智能家居照明系统.zip 是一套以 Android 客户端为主的智能家居照明系统项目源码,面向计算机类毕业设计或课程作业场景,适合需要完成智能家居相关选题的学生参考,可覆盖从需求分析、系统架构到界面与控制逻…

阅读更多 →
嵌入式Linux线程开发:核心技术与优化实践 2026/9/12 17:12:47

嵌入式Linux线程开发:核心技术与优化实践

1. 嵌入式Linux线程开发全景指南在嵌入式Linux开发中,线程技术是构建高效实时系统的核心武器。与通用计算环境不同,嵌入式场景对线程的控制精度和资源消耗有着近乎苛刻的要求。我曾在一个工业控制器项目中使用线程技术将系统响应速度提升300%&#xff0c…

阅读更多 →
51单片机火灾报警器:DS18B20+ADC0809+LabVIEW上位机完整设计 2026/9/12 17:09:47

51单片机火灾报警器:DS18B20+ADC0809+LabVIEW上位机完整设计

简介:基于51单片机设计的火灾报警器毕设源码包,适合计算机、通信、自动化等专业学生用于课程设计、期末大作业或毕业设计参考。项目包含完整的单片机C51程序与LabVIEW上位机虚拟仪器,能够实现温度、烟雾、光强等环境参数的采集监测与异常报警…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞