RoboChallenge 具身智能年度报告：4 万次真机评测揭示 51% 成功率真相

这并非个别模型的问题，而是整个阶段性技术水平的真实写照。Table30 覆盖了 30 个标准化桌面任务，横跨刚体操作、精细抓取、软体形变与长序列任务，对模型提出的是端到端的综合能力要求。

与此同时，榜单还呈现出一个值得注意的结构性现象：多数模型的过程分显著高于最终成功率。以 Top 3 模型为例，其平均成功率集中在 35%–51% 区间，但过程分均超过了 55——这说明在大量失败任务中，模型并非'完全失效'，而是已经完成了相当一部分关键步骤，只是在某个环节出现了不可恢复的偏差。

这恰恰体现了真实物理世界的残酷性：与数字空间不同，现实任务往往不允许回滚重来，一次微小失误就可能导致整个任务失败。

三、报告核心洞察：能力图谱与'叹息之墙'

通过对 Top 模型在单任务维度上的表现分析，RoboChallenge 将 Table30 任务划分为三个清晰的能力梯队。

第一梯队，'Hello World'级任务。

以堆碗（stack_bowls）为代表，这类任务在头部模型中已接近满分，Top 3 模型成功率均达到 100%。它们更多承担的是'入场测试'的角色，用于验证模型是否具备基本的视觉感知与抓取能力，而不再具备足够的区分度。

第二梯队，工程能力的分水岭。

如放鞋上架、将杯子放到杯垫、寻找指定目标等任务，Top 1 模型成功率可达 90%，但对感知稳定性、抓取精度与控制策略提出了更高要求。这一层开始明显拉开模型之间的差距，工程细节与系统稳定性成为关键变量。

第三梯队，当前阶段最典型的'能力悬崖'。

在 Table30 中，这一梯队任务的共同特征是：成功与失败之间几乎不存在缓冲区。在按三个按钮、打开水龙头等任务中，往往只有某一特定模型能够达到 100% 成功率，而后续模型成绩迅速下滑。这类任务高度依赖模型在特定能力维度上的深度优化，也暴露出当前 VLA 模型在能力分布上的明显不均衡。

除了以上三大梯队，在 RoboChallenge 的任务热力图中，还有数个任务出现了'全模型成功率为 0%'的情况——RoboChallenge 官方将这类任务形象称为'叹息之墙'。

以'制作素三明治'为例，该任务要求严格的操作顺序与双臂协同。但在实测中，模型往往在最初的抓取阶段就出现数量或位置错误，一步失误直接导致全局失败，几乎没有容错空间；在'给盆栽浇水'任务中，报告显示模型能完成前序步骤，却在最后'忘记'将水壶归位，这直指长时序任务中的状态保持与逻辑连贯难题；在软体操作任务（如'叠抹布'）中，即便是表现最好的模型，成功率也仅有 30%，说明柔性物体在受力后的不可预测形变，至今仍是具身智能领域公认的最大难题之一。

RoboChallenge 年度报告中还明确指出，单任务模型与多任务模型之间也存在巨大性能鸿沟。以同一基座模型为例，报告给出的数据显示：Pi0.5 在单任务设定下的平均成功率为 42.67%，而在多任务设定下仅为 17.67%；Pi0 的对应差距也同样接近 20 个百分点——这清晰表明，开发真正通用的'机器人大脑'，而非针对单项任务的'熟练工'，仍是核心挑战。

跟网上的 Demo 相比，RoboChallenge 公开的这些失败案例和数据并不'好看'，但也因此构成了最有价值的资产：一个公开、可复盘的具身智能错题集。

四、指数级增长的数据背后：真机评测不再是尝试，而是刚需

如果说榜单成绩揭示的是模型能力的'高度'，那么平台使用数据反映的，则是整个行业的'重心迁移'：RoboChallenge 在上线后的短短 4 个月内，评测热度呈现出明显的指数级增长趋势。

截至报告统计周期结束，RoboChallenge 已累计核发 209 个提测资格，其中 82 位开发者完成了本地推理环境搭建并成功提交真机评测，从申请到实际提测的转化率达到 39.2%。其中，除了上文提到的 Pi0 和 Pi0.5，不仅 RDT-1B、CogACT 及 OpenVLA-OFT 等已成功完成测试并上榜，千寻智能与自变量团队也完成了完整的 Table30 任务集评测，极佳视界、智源研究院、中移杭研、星海图、地平线等多家机构的模型更是正在 RoboChallenge 平台进行真机实测。

更直观的信号来自真实执行规模。RoboChallenge 平台累计完成的真机测试已达 41969 次，单日最高提交评测 181 次 Runs，单日真机执行峰值达到 834 次 Rollouts——这不仅验证了 RoboChallenge 平台在高并发场景下的系统稳定性，也反映出一个事实：越来越多模型正在把'是否能通过 RoboChallenge 真机测试'作为自身能力验证的必要条件，而非加分项。

从地域分布来看，这种需求也并非局限于单一市场。当前 RoboChallenge 的活跃用户中，中国开发者占比 58.3%，美国 22.0%，新加坡、日本及阿联酋等地区也持续有团队参与评测。

如果说 ImageNet 曾经统一了视觉任务的评估方式，那么 RoboChallenge 正在尝试为物理世界建立一套可比较、可复盘、可持续演进的验证坐标系。

坦白说，RoboChallenge 给出的答案，可能并不令人兴奋：没有 90% 的通用成功率；没有'一次训练，通吃任务'；甚至没有稳定完成'做一份三明治'。但恰恰是这些不完美的数据，构成了具身智能真正向前的方向。

当行业逐渐告别 Demo 滤镜，开始正视真实物理世界的复杂性，RoboChallenge 所提供的，不只是榜单，而是一面镜子——它让所有人第一次站在同一把尺子前，看清自己离'通用具身智能'到底还有多远。