精读 VPP2:先学会预测未来,再学动作——14B 视频策略零样本超过 64B Cosmos3(附开源权重)
Robotera 与清华《Video Prediction Policy 2: Predict Better, Act Better》精读(含开源权重链接):VPP2 先在大规模操作视频上做事件级续预训练,用「详细 caption + 完整事件轨迹」把指令到未来的映射变得确定;再后训练并蒸馏成单步视觉规划器,最后用 MoT 动作专家学隐式逆动力学。视频预测指令跟随率 14B 反超 64B Cosmos3 达 11 个点;真机 ALOHA 零样本 58.5%(π0.5 40.0%);LIBERO-Pro 45.0%、LIBERO-OOD 63.9%、RoboDojo 仿真 32.26% 均为评测中最高。视频模型权重(Stage-1/Stage-2)已开源在 Hugging Face 与 ModelScope,RoboDojo 训练代码同步放出。本文逐张讲解论文全部 10 张图,明确标注每项任务是仿真还是真机,并给出数据来源与三阶段训练的完整配置。