成功判定に使う物理量を補助損失の教師信号に、潜在世界モデルのプランニング成功率を改善
本プレプリントは、潜在世界モデルのプランニングにおいて、タスクの成功判定に使われる物理量(成功基準量)を補助損失の教師信号として直接学習させる手法を提案した。LeWMを用いたPushTとcubeで成功率がそれぞれ3.5ポイント、3.4ポイント(絶対差)向上し、統計的に有意だった。テスト時は線形ヘッドを破棄するためモデルや計算コストは変わらず、成功基準に含まれる全量を教師にすることで有意な劣化は見られなかった。
ロボティクスとフィジカルAIの最新論文と、それぞれが産業にもたらす意味。
本プレプリントは、潜在世界モデルのプランニングにおいて、タスクの成功判定に使われる物理量(成功基準量)を補助損失の教師信号として直接学習させる手法を提案した。LeWMを用いたPushTとcubeで成功率がそれぞれ3.5ポイント、3.4ポイント(絶対差)向上し、統計的に有意だった。テスト時は線形ヘッドを破棄するためモデルや計算コストは変わらず、成功基準に含まれる全量を教師にすることで有意な劣化は見られなかった。
ロボット動画生成モデルが、テキストで指定された質量や粘性など外見から判断できない物理特性を無視する問題を測るベンチマークPhysicsLENSを開発した。本論文はプレプリントであり、査読済み採録は明記されていない。同一フレームとタスクで物性記述だけを変えたマッチドシナリオを用意し、4モデル439本の動画を人で評価した結果、物理的に妥当に見える47本中34本が指定特性に従っていなかった。自動評価器は妥当性AUC 0.72、タスク完了AUC 0.81を達成したが、隠れた特性の判定は難しいと報告した。
ロボット企業のMagicLabは、行動を選びながら3次元シーンがどう動き、行動後にどうなるべきかを同時に予測する34億パラメーターのロボットモデルMagic-W0をプレプリントで公開した。10月3日の改訂版ではRoboDojo-Simの順位表で平均36.75点の首位に立ったが2位との差は0.48点にとどまり、実機5タスクではPhysical Intelligenceのπ0.5を94.6%対91.8%で上回った。
プレプリントとして公開された本研究では、TD-M(PC)2を基盤に、批評家の学習目標を多段階化するMTD、計画時の終端価値に不確実性ペナルティを加えるATE、実現報酬で重み付けした模倣を行うRADを組み込んだPL-MPCを提案した。HumanoidBenchのbalance-hardでTotal Average Returnが98±18から387±255へ、hurdleで199±13から466±200へ向上し、実機のKUKA IIWA14によるレンチとナットの位置合わせでもTD-M(PC)2を上回る成功率を報告した。
本論文はarXivで公開されたプレプリントである。Social-WMは自我中心RGB動画から潜在世界モデルを学習し、名目行動と実際に実現可能な行動の乖離を安全信号として計画する。Social-HM3Dで成功率63.77%、人間衝突率21.67%を達成し、既存のNavThinkerと比べて人間衝突を44.6%削減した。Social-MP3Dへのゼロショット転移でも成功率54.15%、人間衝突率23.34%を報告した。
RoboCoachは、世界モデル内で長いタスクを模擬実行し、最初に失敗する部分作業と対応技能専門家を特定して追加実演を要求する枠組みである。このプレプリントでは、2つのシミュレーション環境と2台の実機で評価し、実機では150件の部分作業実演を追加するだけでFrankaの成功率を13.3%から75.0%に、AgileXを40.0%から83.8%に改善したと報告している。さらに、更新した専門家は未学習の4つの構成タスクで平均35.0%の成功率を示し、均一取得の共有方策ベースラインの0%を上回った。
Latent world models learn action-conditioned dynamics in representation space and often score candidate actions by Euclidean distance to a goal representation. Joint training typically regularizes the representation to prevent collapse, but the resulting representation geometry also determines how terminal errors are weighted during planning.
A video world model trained on robot egocentric footage predicts outcomes of actions for evaluation and planning.
論文は arXiv のロボティクス分野から取得しています。当社の要約が未作成の場合は、要旨の冒頭を表示します。