arxiv.org·2026/10/19
报告以 GPT-6-Astra 检验通用模型能否替代专用具身策略。评测覆盖 12 个基准,允许 in-context learning 与最高 10× 步数,先把训练演示冻成知识包,再于测试中检索、改写并纠错;放宽步数使失败恢复转化为成功率。它在 LIBERO 与 SIMPLE 接近饱和,在 RoboDojo 达 81.9%、DexJoCo 达 87.3%,超过既有方法与 agent 方案,但依赖演示覆盖和额外步数。消融显示该模型审查 VLA 动作的闭环协作优于开环或单用 VLA,末端执行器指令与自适应 chunking 优于关节角直控。真实单臂、双臂、灵巧手、移动平台与人形试验中,刚性抓取较稳,布料、插拔、长时程、缺演示与物理验证仍难,安全、机械与实时约束使加步换成功不可行。作者提出按人类需求出题、不给演示、让世界时钟持续运行的新基准,家庭原型暴露遗忘环境状态、不会探索陌生机构与推理期间观察过时的问题。
为什么重要 对具身数据闭环工程师:它指出 ICL 演示、重试成本与真机约束是落地瓶颈,并给出下一代评测方向。适合 具身智能数据闭环、机器人学习与评测工程师
GPT-6-Astra 在机器人操作与导航方面展现出一种能力水平,挑战了为单个任务和具身形态构建专用模型的传统范式。在本报告中,我们不仅追问 GPT-6-Astra 有多强大,还追问其能力对该领域意味着什么。首先,我们探究独立运行的 GPT-6-Astra 的极限。我们在 12 个代表性基准上进行了大规模评估,这些基准涵盖桌面操作、人形机器人、移动平台和灵巧手。
在一种允许从训练集演示中进行上下文学习(ICL)并大幅增加执行步数的统一协议下,GPT-6-Astra 取得了前所未有的性能(图 1)。未来的研究可以聚焦于改进:1) ICL 的通用性,2) 成本与执行时间,3) 物理状态验证,4) 从不可逆失败中恢复,以及 5) 长时程中的进度保持。其次,我们研究用于具身控制的智能体框架(agentic harness)。
我们发现,高层“System 2”推理器(即 GPT-6-Astra)与低层“System 1”控制器(例如 π0.5)之间的闭环协调成本高昂但有效。第三,我们考察 GPT-6-Astra 在真实世界部署中的表现。我们在 8 种机器人配置上的实验揭示了显著的差距:1) ICL 所需的机器人演示数据采集成本高昂,以及 2) 在物理约束下,用更长的执行时间换取更高的成功率是不现实的。
第四,我们展望下一代具身基准。我们开发了一个原型,它 1) 从真实世界需求中派生任务,2) 不提供领域内演示,并且 3) 使用一个在智能体思考时持续运行的世界时钟来评判智能体。综合来看,我们的结果表明,GPT-6-Astra 在很大程度上已经跨过了具身能力的门槛,但尚未跨过实用具身智能的门槛。
GPT-6-Astra demonstrates a level of competence in robotic manipulation and navigation that challenges the conventional paradigm of building specialized models for individual tasks and embodiments.
In this report, we ask not only how capable GPT-6-Astra is, but what its capabilities imply for the field. First, we probe the limits of standalone GPT-6-Astra.
We conduct a large-scale evaluation across 12 representative benchmarks spanning tabletop manipulation, humanoids, mobile platforms, and dexterous hands.
Under a unified protocol that allows in-context learning (ICL) from training-set demonstrations and substantially increases the number of execution steps, GPT-6-Astra achieves unprecedented performance (Fig. 1).
Future research may focus on improving 1) the generality of ICL 2) cost and execution time, 3) physical-state verification, 4) recovery from irreversible failures, and 5) long-horizon preservation of progress.
Second, we study the agentic harness for embodied control.
We identify that close-loop coordination between a high-level "System 2" reasoner (i.e., GPT-6-Astra) and a low-level "System 1" controller (e.g., π0.5) is costly but effective.
Third, we examine GPT-6-Astra on real-world deployment.
Our experiments on 8 robot configurations reveal substantial gaps: 1) robot demonstrations required for ICL are expensive to collect, and 2) it is implausible to trade longer execution for higher success rates with physical constraints.
Fourth, we envision the next generation of embodied benchmarks.
We develop a prototype that 1) derives tasks from real-world needs, 2) provides no in-domain demonstrations, and 3) judges agents on a world clock that keeps running while they deliberate.
Taken together, our results suggest that GPT-6-Astra has largely crossed the threshold of embodied competence, but not yet that of practical embodied intelligence.
SIMPLE ICL
标准预算四任务
RoboDojo
统一协议上限
DexJoCo
灵巧操作
LIBERO族
与 SIMPLE 接近饱和
注释 · 官方报告;统一协议含 ICL 与扩展步数。出自 §2.2/Fig 1
注释 · 官方报告;均为 RoboDojo 直接控制基线。出自 §3.2/Fig 7



EVIDENCE / METHODS
表格
ICL+闭环VLA 达 54.17%
| 配置 | SR % | Tokens M |
|---|---|---|
| Baseline | 15.56 | 2.560 |
| VLA Open-loop | 5.83 | 0.387 |
| VLA Closed-loop L=4 | 25.83 | 2.796 |
| ICL+VLA Closed-loop | 54.17 | 19.335 |
注释 · 官方报告;性能最高但 token 成本最高。出自 §3.1/Fig 7
原版排版与图表 · 手机无法内嵌时可在浏览器打开。PDF 插件内选文不能传给网页助手。