AI 研究助理

基于站内最新资料,回答 AI 前沿问题

回答带出处引用,支持多轮追问,当前页面内容会作为上下文

快速响应
AI 前沿跟踪
今日首页重点内容GitHub 趋势榜
领域
学术研究
大模型
具身智能
AI 基础设施
智能体 · Skill · MCP
机器人
多模态
自动驾驶
数据 / MLOps
AI 硬件
安全对齐
综述与报告
博客机器人具身智能机器人基础模型in-context learningNVIDIA Isaac

Skild AI Taps NVIDIA Physical AI to Teach Robots New Tasks From a Single Video

阅读原文
AI 解读已生成 · AI 生成,数字以原文为准
AI 全文总结值得深入基于页面正文 5699 字 · 完整阅读

Skild AI 发布 S1,单视频学新任务,官方称每步成功率 66% vs 9%

工厂任务与布局多变而传统机器人须大量重编程,Skild AI 为此在 NVIDIA AI 基础设施上训练出上周发布的机器人基础模型 S1(公司称发布时年化营收 run rate 已达 $100 million):操作员录一段任务演示视频作为 prompt,模型以 in-context learning 理解意图、物体与序列并映射为机器人动作,无需更新权重或任务专项训练,就能执行预训练数据未覆盖、时长至 10 分钟的多步新任务,如移盆栽、冲咖啡、组装套件;Skild 报告此类任务每步成功率达 66%,远高于同类 AI 系统的 9%,并估算一段视频约抵 380 个实操训练样本。落地层面,Skild、NVIDIA 与 Foxconn 在双臂机械臂上部署 Skild Brain,精密组装 NVIDIA Blackwell 系统,协议允许时部署经验还会回流改进主模型;研发链路上,Cosmos 与 Cosmos Curator 生成并整备训练数据,Omniverse 及 Isaac Sim 提供物理仿真,在 Isaac Lab 内借 Newton 物理引擎做强化学习以缩小 sim-to-real 差距,双方联合开发的 GPU 加速仿真求解器将并入 Newton 向所有开发者开放。

  1. 1S1 无需更新权重,用 in-context learning 从单视频学新任务
  2. 2官方称新任务每步成功率 66%,类似系统 9%,提升超 7 倍
  3. 3官方估计单视频约等价 380 交互示例,人工需 50-100 小时

为什么重要 把机器人技能获取从重训变为视频提示,并给出 Cosmos→Isaac→TensorRT 的 NVIDIA 全链路参考路径。适合 机器人模型训练、真机部署、仿真数据闭环工程师;工厂自动化落地决策者

新任务每步成功率66% vs 9%
视频到真机部署11 分钟
部署伙伴60+ 家
年化收入 run rate$100M
单视频等价示例380 个
来源
blogs.nvidia.com
发布
2026/09/11
作者
Sasa Docca
产品
S1 机器人基础模型
发布方
Skild AI
学习输入
单个视频演示
任务时长
最长 10 分钟
对比项之前 / 基线现在 / 本方案
新任务每步成功率类似 AI 系统 9%Skild S1 66%官方称提升超 7 倍
数据效率人工采集 50-100 小时单视频演示,约等价 380 个示例官方估计

中文(AI 翻译)

制造车间、仓库和生产线很少保持固定——任务会变化、布局会调整、新产品会到来,而多数机器人若不做大量重新编程就跟不上。Skild AI 的新 S1 机器人基础模型旨在解决这一问题,它被设计为能从单次视频演示中学习此前未见过的长程任务。该模型于上周发布,以视频为输入来理解并执行任务,无需更新权重或进行任务特定的后训练——这一技术称为 in-context learning。

Skild 在 NVIDIA AI 基础设施上构建 S1 并完成研究,这属于更广泛合作的一部分,涵盖合成数据生成、模型训练、仿真和真实世界的物理 AI 部署。两家公司正合作将可适应的机器人智能从实验室推向工厂及其他动态运行环境。“通过经验而非预编程来学习,是机器人领域已经发生的阶跃式变化,”Skild AI 联合创始人兼 CEO Deepak Pathak 说。

“NVIDIA Isaac Lab 和 NVIDIA Cosmos 技术帮助 Skild 创造其机器人跨多种场景与本体学习所需的大规模、多样化经验。”此次发布之际,公司在首次商业部署后 10 个月即达到 1 亿美元年化营收。在此期间,Skild 已建立 60 多个部署合作。

原文

Manufacturing floors, warehouses and production lines rarely stay fixed — tasks change, layouts shift and new products arrive, and most robots can’t keep up without significant reprogramming.

Skild AI’s new S1 robot foundation model helps address this, designed to learn previously unseen, long-horizon tasks from a single video demonstration.

The model, launched last week, uses &\#**8230**;

深度总结

1 / 6
发布了什么· 要点

Skild AI 发布 S1 机器人基础模型,使用单个视频演示作为 prompt 学习新任务。

  • Skild AI 发布 S1 机器人基础模型,使用单个视频演示作为 prompt 学习新任务。
  • 官方称无需更新权重、无需任务特定后训练,该技术名为 in-context learning。
  • 模型上周发布,在 NVIDIA AI 基础设施上完成训练与研究。