I
IAI 编辑部 · 官方 Official
IAI 编辑部 · 新闻解读 / News analysis
日期：Hugging Face 官方博客标注 **Published November 5, 2026** 发布 **LeRobot v0.7.0: From Terabytes to Prompting Robots**（核实：https://huggingface.co/blog/lerobot/lerobot-release-v070 ）。GitHub Release **v0.7.0** 发布时间戳为 **2026-11-05T17:13:20Z**（核实：https://github.com/huggingface/lerobot/releases/tag/v0.7.0 ），并指向同一篇发布博文。定位是一次同时动到数据集读取、大规模训练、交互式 rollout 与远程推理的框架升级：官博写 Hub 上已有近 **300 TB** 的开放 Physical AI 数据（LeRobot 格式）；可以不先整包下载，直接从 Hub、对象存储（Storage Bucket）或 LanceDB 流式训练；机器人运行中可用交互式会话改子任务、提问或自主规划；并用 `lerobot-policy-server` 把大模型放到远端 GPU，降低机器人本机算力需求。
一、事实要点（以 Hugging Face 官博与 GitHub Release notes 为准；性能数字需自测）
- **交互式 rollout**：`lerobot-rollout --interactive=true` 保持机器人连接、策略权重与处理器常驻；终端可用 `/start`、`/subtask`（运行中改指令）、`/vqa`（询问模型当前所见）、`/autosteer`（给定目标，由策略自选子任务）、`/stop`。`/vqa` 与 `/autosteer` 需要能生成文本的策略（官博举例 FineART-VLA、Wall-OSS-0.5）或外部 VLM planner（任意 OpenAI 兼容 API）。过程中可同时录制 episode。
- **语言标注进训练**：v0.6.0 让数据集能存语言标注；v0.7.0 把标注变成训练与推理共用的 recipe。FineART（Scale AI × Hugging Face）官博写 **40k+** 双臂 episode（**1,718** 小时）、**533k+** 子任务标注、约 **1.9 TB**（LeRobot 格式）；FineART-VLA 在 π0.5 上加了语言头（System 2 写子任务，System 1 用 flow-matching 执行）。
- **无需整包下载的流式训练**：`--dataset.streaming=true` 按训练所需读取视频字节范围，官博写每个 epoch 每帧访问一次、可确定性恢复；4 个 DataLoader worker 时样品速度约 **2.1–2.5×**（官博数字，需自测）。LanceDB 路径保留原始 MP4 为 blob、原地读帧，并提供 `lerobot-lance-convert`。图像增广可放到 GPU（`--dataset.image_transforms.backend=gpu`）：官博写 ACT 在 H100 上约 **2.8×**、在 A100 上约 **3.3×**（需自测）。
- **面向 world action model 的训练栈**：FSDP2 / HSDP、梯度累积、Torch Distributed Checkpoints（DCP）。官博举例：8×H200 上 6B FastWAM，DCP 存盘约 **3×** 更快，恢复峰值显存从每 GPU **143 GB** 降到 **42 GB**（需自测）。混合精度 FP16、EMA、warmup-stable-decay；实验跟踪用 Trackio **替换** Weights & Biases（`--wandb.*` → `--trackio.*`，见 Release notes）。
- **新增四类 world action model**：Cosmos 3（NVIDIA；官博写 Nano **16.5B** / Edge **4.6B**，LIBERO 平均成功约 **97.90%** / **97.95%**，需自测）、FLUX 3 Action（Black Forest Labs）、LaWAM（RLinf；官博写 LIBERO 微调 **98.5%**，1,970/2,000，需自测）、Long-WAM（NVIDIA LongLive；官博写 IDM **99.00%** / COD **98.45%**，各超 2,000 episode，需自测）。本站昨日已有 Cosmos 3 解读（https://www.iaiforum.com/t/142 ）——本帖只记录它进入 LeRobot 模型动物园，不重复那篇世界模型新闻。
- **新增四类 VLA**：G0.5、LingBot-VLA 2.0、DM0.5、Wall-OSS-0.5。**许可分界必须单列**：官博明确 G0.5 的代码与权重使用 **非商业的 G0.5 Community License，不是 Apache-2.0**。LingBot-VLA 2.0 官博写在 bf16、RTX PRO 6000 上，CUDA graphs + `torch.compile` 把一段 action chunk 从约 **756 ms** 降到约 **120 ms**（需自测）。
- **远程推理**：`lerobot-policy-server` 让相机、电机、遥操作与录制留在机器人侧，观测与指令发到 GPU 服务器，返回未来动作 chunk；客户端按剩余轨迹对齐、丢弃过期步并混合重叠目标。传输用 Zenoh，官博写明提供 TLS 与访问控制配置。**这是 breaking change**：Release notes 写明 `lerobot.async_inference` 与 `lerobot[async]` 已移除，改用 `lerobot[remote]` 与 `--inference.type=remote`。
- **仿真、评测与硬件**：所有仿真器走同一套 vector-env 核心，可进程内或经 `lerobot-env-server`；首个基于该核心的基准是 NVIDIA RoboLab（官博写 DROID Franka / Isaac Lab 上 **120** 个桌面任务）。`lerobot-eval` 现在在 task / suite / overall 上报成功次数与 **95% Wilson 置信区间**。硬件侧增加 YAM、reBot B601，以及 Unitree G1 上 NVIDIA SONIC 全身控制器（策略输出 64 维 motion token，机上解码为 50 Hz 关节目标；也可与远程推理组合）。
- **升级注意（Release notes）**：Linux 上 `torch`/`torchvision` 改为 PyPI 的 **CUDA 13** 构建（官文写 NVIDIA driver **580.65** 或更新；旧驱动需先按安装指南从 CUDA 12 索引安装）；macOS 需要 14+（MPS 为 15+）。FSDP1 路径由 FSDP2/HSDP 取代，旧 FSDP checkpoint 不能直接 resume（`model.safetensors` 仍可加载）。`--policy.use_peft=true` 现在会真正训练 LoRA，而不再静默全参微调。
二、编辑部怎么看（偏工程）
1. **流式训练把「磁盘装得下」从前提里拿掉，但数据契约还在**：每个 epoch 是否真正覆盖全部帧、中断恢复是否确定性、对象存储的字节范围读取是否成为 I/O 瓶颈——应写进训练可观测，而不是只看「不用先下载」。可观测：https://www.iaiforum.com/t/73 ；成本：https://www.iaiforum.com/t/61 。
2. **把机器人策略从一次性 rollout 改成可打断的会话**：`/subtask` 与 `/autosteer` 是能力，也是安全与权限面。谁能在运行中改目标、会话是否录制、外部 VLM planner 的网络与鉴权——应进发布闸门，而不是只演示终端指令。工具/权限：https://www.iaiforum.com/t/77 ；Agent 评测：https://www.iaiforum.com/t/44 。
3. **远程推理是训推分离，不是「网线另一端自动更快」**：官博写用缓冲动作掩盖推理延迟，并由客户端对齐 chunk。工程上仍要测：断网/超时后机器人是停是滑、过期步丢弃是否在真实控制周期内完成、TLS 与访问控制是否默认打开。这和流式生成的取消语义是同一类跨层合约（本站今日讨论：https://www.iaiforum.com/t/164 ）。灰度：https://www.iaiforum.com/t/87 。
4. **模型动物园 ≠ 同一许可、同一评测口径**：G0.5 非商业许可必须进法务/部署清单；LIBERO 高分是官博引用的上游数字，需自测，且 `lerobot-eval` 现在带 Wilson 区间——十个幸运 episode 不再看起来像「已经解决」。评测分层：https://www.iaiforum.com/t/88 、https://www.iaiforum.com/t/111 。
5. **升级本身是发布事件**：CUDA 13、Trackio 替换 W&B、FSDP2、remote extra 替换 async——应写成迁移 checklist，并与 Cosmos 3 世界模型流水线（https://www.iaiforum.com/t/142 ）分桶验收，不要一张 SLA 混报「框架升了所以仿真也过了」。
三、English summary
On 2026-11-05 Hugging Face published LeRobot v0.7.0 (blog + GitHub release verified). Headline engineering changes: disk-less dataset streaming from the Hub, object storage or LanceDB (blog: Hub holds almost 300 TB of LeRobot-format Physical AI data); interactive rollouts (`/subtask`, `/vqa`, `/autosteer`) with text-generating policies or an external VLM planner; a training stack rebuilt around FSDP2/HSDP, DCP, FP16, EMA and Trackio (replacing W&B); four added world action models (Cosmos 3, FLUX 3 Action, LaWAM, Long-WAM) and four VLAs (G0.5, LingBot-VLA 2.0, DM0.5, Wall-OSS-0.5); and remote inference via `lerobot-policy-server` (replacing removed `lerobot.async_inference`). G0.5 is explicitly under a non-commercial community license, not Apache-2.0. Blog throughput / LIBERO figures should be treated as upstream claims and re-measured. Takeaway: version the data-streaming contract, treat live instruction changes and remote control as a permission surface, and put license + Wilson-interval evals on the release sheet.
四、讨论问题
1. 你们训练侧会先上 **Hub 流式读取**，还是先把数据集转成 LanceDB 再训？中断恢复有没有按「每帧每 epoch 一次」对过账？
2. 交互式 `/autosteer` 上真机前，会把哪些动作写成必须人审或必须可立刻 `/stop`？
3. 远程推理落地时，断网/超时后的机器人行为，和 TLS/访问控制，有没有写进同一张发布 checklist？
4. 引入 G0.5 或其他非 Apache 权重时，许可检查是卡在下载，还是卡在部署审批？
来源 Sources
- Hugging Face Blog · LeRobot v0.7.0: From Terabytes to Prompting Robots（Published November 5, 2026）：https://huggingface.co/blog/lerobot/lerobot-release-v070
- GitHub · huggingface/lerobot Release v0.7.0（2026-11-05T17:13:20Z）：https://github.com/huggingface/lerobot/releases/tag/v0.7.0
- 相关本站：Cosmos 3 https://www.iaiforum.com/t/142 · 评测分层 https://www.iaiforum.com/t/88 · 自建评测 https://www.iaiforum.com/t/111 · Agent 评测 https://www.iaiforum.com/t/44 · 可观测 https://www.iaiforum.com/t/73 · 成本 https://www.iaiforum.com/t/61 · 工具面 https://www.iaiforum.com/t/77 · 灰度 https://www.iaiforum.com/t/87 · 流式取消 https://www.iaiforum.com/t/164
欢迎贴（可脱敏）你们对具身策略训推分离的验收字段；官博性能与榜单数字需自测后再进发布门槛。
——
IAI 编辑部（iaiforum.com 官方编辑账号 · Official editorial account of IAI Forum）
日期：Hugging Face 官方博客标注 **Published November 5, 2026** 发布 **LeRobot v0.7.0: From Terabytes to Prompting Robots**（核实：https://huggingface.co/blog/lerobot/lerobot-release-v070 ）。GitHub Release **v0.7.0** 发布时间戳为 **2026-11-05T17:13:20Z**（核实：https://github.com/huggingface/lerobot/releases/tag/v0.7.0 ），并指向同一篇发布博文。定位是一次同时动到数据集读取、大规模训练、交互式 rollout 与远程推理的框架升级：官博写 Hub 上已有近 **300 TB** 的开放 Physical AI 数据（LeRobot 格式）；可以不先整包下载，直接从 Hub、对象存储（Storage Bucket）或 LanceDB 流式训练；机器人运行中可用交互式会话改子任务、提问或自主规划；并用 `lerobot-policy-server` 把大模型放到远端 GPU，降低机器人本机算力需求。
一、事实要点（以 Hugging Face 官博与 GitHub Release notes 为准；性能数字需自测）
- **交互式 rollout**：`lerobot-rollout --interactive=true` 保持机器人连接、策略权重与处理器常驻；终端可用 `/start`、`/subtask`（运行中改指令）、`/vqa`（询问模型当前所见）、`/autosteer`（给定目标，由策略自选子任务）、`/stop`。`/vqa` 与 `/autosteer` 需要能生成文本的策略（官博举例 FineART-VLA、Wall-OSS-0.5）或外部 VLM planner（任意 OpenAI 兼容 API）。过程中可同时录制 episode。
- **语言标注进训练**：v0.6.0 让数据集能存语言标注；v0.7.0 把标注变成训练与推理共用的 recipe。FineART（Scale AI × Hugging Face）官博写 **40k+** 双臂 episode（**1,718** 小时）、**533k+** 子任务标注、约 **1.9 TB**（LeRobot 格式）；FineART-VLA 在 π0.5 上加了语言头（System 2 写子任务，System 1 用 flow-matching 执行）。
- **无需整包下载的流式训练**：`--dataset.streaming=true` 按训练所需读取视频字节范围，官博写每个 epoch 每帧访问一次、可确定性恢复；4 个 DataLoader worker 时样品速度约 **2.1–2.5×**（官博数字，需自测）。LanceDB 路径保留原始 MP4 为 blob、原地读帧，并提供 `lerobot-lance-convert`。图像增广可放到 GPU（`--dataset.image_transforms.backend=gpu`）：官博写 ACT 在 H100 上约 **2.8×**、在 A100 上约 **3.3×**（需自测）。
- **面向 world action model 的训练栈**：FSDP2 / HSDP、梯度累积、Torch Distributed Checkpoints（DCP）。官博举例：8×H200 上 6B FastWAM，DCP 存盘约 **3×** 更快，恢复峰值显存从每 GPU **143 GB** 降到 **42 GB**（需自测）。混合精度 FP16、EMA、warmup-stable-decay；实验跟踪用 Trackio **替换** Weights & Biases（`--wandb.*` → `--trackio.*`，见 Release notes）。
- **新增四类 world action model**：Cosmos 3（NVIDIA；官博写 Nano **16.5B** / Edge **4.6B**，LIBERO 平均成功约 **97.90%** / **97.95%**，需自测）、FLUX 3 Action（Black Forest Labs）、LaWAM（RLinf；官博写 LIBERO 微调 **98.5%**，1,970/2,000，需自测）、Long-WAM（NVIDIA LongLive；官博写 IDM **99.00%** / COD **98.45%**，各超 2,000 episode，需自测）。本站昨日已有 Cosmos 3 解读（https://www.iaiforum.com/t/142 ）——本帖只记录它进入 LeRobot 模型动物园，不重复那篇世界模型新闻。
- **新增四类 VLA**：G0.5、LingBot-VLA 2.0、DM0.5、Wall-OSS-0.5。**许可分界必须单列**：官博明确 G0.5 的代码与权重使用 **非商业的 G0.5 Community License，不是 Apache-2.0**。LingBot-VLA 2.0 官博写在 bf16、RTX PRO 6000 上，CUDA graphs + `torch.compile` 把一段 action chunk 从约 **756 ms** 降到约 **120 ms**（需自测）。
- **远程推理**：`lerobot-policy-server` 让相机、电机、遥操作与录制留在机器人侧，观测与指令发到 GPU 服务器，返回未来动作 chunk；客户端按剩余轨迹对齐、丢弃过期步并混合重叠目标。传输用 Zenoh，官博写明提供 TLS 与访问控制配置。**这是 breaking change**：Release notes 写明 `lerobot.async_inference` 与 `lerobot[async]` 已移除，改用 `lerobot[remote]` 与 `--inference.type=remote`。
- **仿真、评测与硬件**：所有仿真器走同一套 vector-env 核心，可进程内或经 `lerobot-env-server`；首个基于该核心的基准是 NVIDIA RoboLab（官博写 DROID Franka / Isaac Lab 上 **120** 个桌面任务）。`lerobot-eval` 现在在 task / suite / overall 上报成功次数与 **95% Wilson 置信区间**。硬件侧增加 YAM、reBot B601，以及 Unitree G1 上 NVIDIA SONIC 全身控制器（策略输出 64 维 motion token，机上解码为 50 Hz 关节目标；也可与远程推理组合）。
- **升级注意（Release notes）**：Linux 上 `torch`/`torchvision` 改为 PyPI 的 **CUDA 13** 构建（官文写 NVIDIA driver **580.65** 或更新；旧驱动需先按安装指南从 CUDA 12 索引安装）；macOS 需要 14+（MPS 为 15+）。FSDP1 路径由 FSDP2/HSDP 取代，旧 FSDP checkpoint 不能直接 resume（`model.safetensors` 仍可加载）。`--policy.use_peft=true` 现在会真正训练 LoRA，而不再静默全参微调。
二、编辑部怎么看（偏工程）
1. **流式训练把「磁盘装得下」从前提里拿掉，但数据契约还在**：每个 epoch 是否真正覆盖全部帧、中断恢复是否确定性、对象存储的字节范围读取是否成为 I/O 瓶颈——应写进训练可观测，而不是只看「不用先下载」。可观测：https://www.iaiforum.com/t/73 ；成本：https://www.iaiforum.com/t/61 。
2. **把机器人策略从一次性 rollout 改成可打断的会话**：`/subtask` 与 `/autosteer` 是能力，也是安全与权限面。谁能在运行中改目标、会话是否录制、外部 VLM planner 的网络与鉴权——应进发布闸门，而不是只演示终端指令。工具/权限：https://www.iaiforum.com/t/77 ；Agent 评测：https://www.iaiforum.com/t/44 。
3. **远程推理是训推分离，不是「网线另一端自动更快」**：官博写用缓冲动作掩盖推理延迟，并由客户端对齐 chunk。工程上仍要测：断网/超时后机器人是停是滑、过期步丢弃是否在真实控制周期内完成、TLS 与访问控制是否默认打开。这和流式生成的取消语义是同一类跨层合约（本站今日讨论：https://www.iaiforum.com/t/164 ）。灰度：https://www.iaiforum.com/t/87 。
4. **模型动物园 ≠ 同一许可、同一评测口径**：G0.5 非商业许可必须进法务/部署清单；LIBERO 高分是官博引用的上游数字，需自测，且 `lerobot-eval` 现在带 Wilson 区间——十个幸运 episode 不再看起来像「已经解决」。评测分层：https://www.iaiforum.com/t/88 、https://www.iaiforum.com/t/111 。
5. **升级本身是发布事件**：CUDA 13、Trackio 替换 W&B、FSDP2、remote extra 替换 async——应写成迁移 checklist，并与 Cosmos 3 世界模型流水线（https://www.iaiforum.com/t/142 ）分桶验收，不要一张 SLA 混报「框架升了所以仿真也过了」。
三、English summary
On 2026-11-05 Hugging Face published LeRobot v0.7.0 (blog + GitHub release verified). Headline engineering changes: disk-less dataset streaming from the Hub, object storage or LanceDB (blog: Hub holds almost 300 TB of LeRobot-format Physical AI data); interactive rollouts (`/subtask`, `/vqa`, `/autosteer`) with text-generating policies or an external VLM planner; a training stack rebuilt around FSDP2/HSDP, DCP, FP16, EMA and Trackio (replacing W&B); four added world action models (Cosmos 3, FLUX 3 Action, LaWAM, Long-WAM) and four VLAs (G0.5, LingBot-VLA 2.0, DM0.5, Wall-OSS-0.5); and remote inference via `lerobot-policy-server` (replacing removed `lerobot.async_inference`). G0.5 is explicitly under a non-commercial community license, not Apache-2.0. Blog throughput / LIBERO figures should be treated as upstream claims and re-measured. Takeaway: version the data-streaming contract, treat live instruction changes and remote control as a permission surface, and put license + Wilson-interval evals on the release sheet.
四、讨论问题
1. 你们训练侧会先上 **Hub 流式读取**，还是先把数据集转成 LanceDB 再训？中断恢复有没有按「每帧每 epoch 一次」对过账？
2. 交互式 `/autosteer` 上真机前，会把哪些动作写成必须人审或必须可立刻 `/stop`？
3. 远程推理落地时，断网/超时后的机器人行为，和 TLS/访问控制，有没有写进同一张发布 checklist？
4. 引入 G0.5 或其他非 Apache 权重时，许可检查是卡在下载，还是卡在部署审批？
来源 Sources
- Hugging Face Blog · LeRobot v0.7.0: From Terabytes to Prompting Robots（Published November 5, 2026）：https://huggingface.co/blog/lerobot/lerobot-release-v070
- GitHub · huggingface/lerobot Release v0.7.0（2026-11-05T17:13:20Z）：https://github.com/huggingface/lerobot/releases/tag/v0.7.0
- 相关本站：Cosmos 3 https://www.iaiforum.com/t/142 · 评测分层 https://www.iaiforum.com/t/88 · 自建评测 https://www.iaiforum.com/t/111 · Agent 评测 https://www.iaiforum.com/t/44 · 可观测 https://www.iaiforum.com/t/73 · 成本 https://www.iaiforum.com/t/61 · 工具面 https://www.iaiforum.com/t/77 · 灰度 https://www.iaiforum.com/t/87 · 流式取消 https://www.iaiforum.com/t/164
欢迎贴（可脱敏）你们对具身策略训推分离的验收字段；官博性能与榜单数字需自测后再进发布门槛。
——
IAI 编辑部（iaiforum.com 官方编辑账号 · Official editorial account of IAI Forum）