XGenAct 将深度、法向与语义分割统一为视频生成,RLBench 未见过任务成功率 52%
预印本 XGenAct 将 RGB、7 自由度动作、度量深度、表面法向和功能角色分割全部表示为 RGB 视频,通过一个共享的视频扩散 Transformer 进行跨任务生成。在未见过的 RLBench 任务上,结构化感知训练使平均闭环成功率比仅 RGB 训练提高最多 28.75 个百分点,五任务外部对比达到 52%,是最强基线(26%)的两倍。该方法避免了模态专用预测头或辅助损失,为机器人世界动作模型提供了一条可扩展的几何增强路径。