world models上級
PhysCanvas、視覚と触覚の世界モデルでpi0.5の実機成功率を59.1%から70.8%に
カメラ映像と指先の触覚を同時に予測する世界モデルPhysCanvasの中でロボット方策pi0.5を強化学習させたところ、接触の多い実タスク4種の平均成功率が59.1%から70.8%に上がったと、中国科学院自動化研究所とAnyverse Roboticsなどの研究チームがプレプリントで報告した。世界モデル内と実機の成功率の相関係数の平均も0.602から0.885に高まった。