工厂任务与布局多变而传统机器人须大量重编程,Skild AI 为此在 NVIDIA AI 基础设施上训练出上周发布的机器人基础模型 S1(公司称发布时年化营收 run rate 已达 $100 million):操作员录一段任务演示视频作为 prompt,模型以 in-context learning 理解意图、物体与序列并映射为机器人动作,无需更新权重或任务专项训练,就能执行预训练数据未覆盖、时长至 10 分钟的多步新任务,如移盆栽、冲咖啡、组装套件;Skild 报告此类任务每步成功率达 66%,远高于同类 AI 系统的 9%,并估算一段视频约抵 380 个实操训练样本。落地层面,Skild、NVIDIA 与 Foxconn 在双臂机械臂上部署 Skild Brain,精密组装 NVIDIA Blackwell 系统,协议允许时部署经验还会回流改进主模型;研发链路上,Cosmos 与 Cosmos Curator 生成并整备训练数据,Omniverse 及 Isaac Sim 提供物理仿真,在 Isaac Lab 内借 Newton 物理引擎做强化学习以缩小 sim-to-real 差距,双方联合开发的 GPU 加速仿真求解器将并入 Newton 向所有开发者开放。
为什么重要 把机器人技能获取从重训变为视频提示,并给出 Cosmos→Isaac→TensorRT 的 NVIDIA 全链路参考路径。适合 机器人模型训练、真机部署、仿真数据闭环工程师;工厂自动化落地决策者
| 对比项 | 之前 / 基线 | 现在 / 本方案 | |
|---|---|---|---|
| 新任务每步成功率 | 类似 AI 系统 9% | Skild S1 66%官方称提升超 7 倍 | |
| 数据效率 | 人工采集 50-100 小时 | 单视频演示,约等价 380 个示例官方估计 |
Skild AI 发布 S1 机器人基础模型,使用单个视频演示作为 prompt 学习新任务。