0.740、4.66、12 项领先:优必选把视频、深度、动作压进同一套表征,三榜登顶的分母是 3 万小时数据
Thinker-WM 在三大具身世界模型基准全部登顶,技术卖点是把 RGB、深度、动作当成「同一个物理过程的三种表述」;但真正决定它上限的,是 3 万小时异构数据的编排方式。
- 三榜全一:优必选自研世界模型 Thinker-WM 在 WorldOlympiad(综合 0.740,3D 一致性 0.531、交互保真度 0.765 两项单项第一)、EWMBench(综合 4.66,超过 Qwen-RobotWorld、Sora2)、WorldArena 1.0 Track-1(12 项维度整体领先)全部拿下第一名。
- 核心架构:Unified Dynamic Transformer(UDT)把 RGB 视频、度量深度、机器人动作编码进同一套共享动态表征联合演化,单一模型支持视频-动作联合生成、世界预测、策略推理、视频转动作、逆动力学等六种能力。
- 深度是「母语」不是外挂:深度作为原生生成模态与视频共享表征,RoboTwin 消融实验中引入深度模态后操作成功率较无深度基线提升 15 个百分点。
- 数据分母:约 2 万小时第一人称人类视频(含约 1 千小时对齐深度)+ 约 1 万小时真实机器人数据(约 3 千小时深度标注)+ 约 1 千小时仿真数据,统一用末端位姿表示所有机器人动作。
- 判断:这份成绩单的看点不在榜单名次,而在「统一表征 + 数据基建」的耦合——刷榜门槛正在从架构设计转向数据编排能力。
10 月 16 日,优必选宣布其自研统一多模态世界模型 Thinker-WM 在三大具身世界模型基准上全部拿下第一名。三张考卷的侧重点并不相同:WorldOlympiad 基于大量真实机器人交互数据构建,覆盖十余种本体与多类相机配置,考的是跨形态、跨视角泛化,Thinker-WM 综合得分 0.740 位列榜首,3D 一致性 0.531、交互保真度 0.765 两项单项也居全部参评模型首位;EWMBench 完整考核场景一致性、末端运动正确性、指令语义对齐三个维度,Thinker-WM 综合总分 4.66,超过 Qwen-RobotWorld、Sora2 等主流模型;仿真基准 WorldArena 1.0 Track-1 则在视觉画质、内容一致性、物理合理性、3D 几何精度、指令遵循等 12 项维度上整体领先。
过往世界模型普遍是拼接式:视频生成管画面、策略网络管动作、几何预测管空间,模块独立计算再接口合并。优必选 Thinker 团队的论证是:一个「杯子被推下桌子」,在语言里是一句话,在动作里是一串关节命令,在视频里是一段物体运动,在深度里是一组距离场——四种表述指向同一个事件,拆到不同模块会把物理上紧密耦合的因果关系切断。
Thinker-WM 的解法是把 RGB、度量深度、机器人动作各自编码后送进同一个 Unified Dynamic Transformer 联合时序建模,深度不再是辅助监督信号,而是与视频共享潜在拓扑的原生生成模态。厂商称之为让物理空间结构成为世界模型的「母语」。消融实验给了支撑:RoboTwin 单任务上,引入深度模态后操作成功率较无深度基线提升 15 个百分点。团队还设计了 MotionProbe 验证:在冻结的视觉表征上接一个极小的运动预测头,仅凭视觉表征就能以很低误差恢复末端执行器位移,说明动作相关信息确实在共享空间里被编码了。
数据侧的编排有两处值得展开。一是跨本体统一:不同机器人的动作空间、坐标系、控制协议差异巨大,Thinker-WM 统一使用末端位姿表示所有机器人动作,再为每台机器人在 token 里嵌入专属标签——不同形态共享同一个生成空间,同时保留各自的本体控制精度。二是数据基建 DataFactory:统一组织视频、状态、动作与语言信息,分层质检过滤异常片段、校验深度与视频对齐,再用异步预取和编码复用减少训练等待。厂商称模型已完成在优必选机器人平台上的部署验证。
把时间轴拉长看,这份成绩单与近期的两条线正好接上:信通院在年度趋势里把「世界模型从生成视频改行做规划」列进关键词,Kyutai 则把「记忆」塞进动作模型、把考题换成时延——行业正在从「能不能生成」转向「能不能当策略底座用」。