Evaluating memory in VLA robot policies: interventional protocol and ChainBench上級
ロボットの記憶をどう検証するか、正しい履歴で成功率39.1%から74.3%に
現在のカメラ映像だけでは解けない新しいベンチマークで、ロボットが正しい履歴を参照できると課題成功率が39.1%から74.3%に上がり、常に正解を選ぶオラクルと並んだ。海南ビーレフェルト応用科学大学とミュンヘン工科大学、ベルリン工科大学によるこのプレプリントは、成功率が上がっただけではロボットの記憶が正しい事実を使っている証拠にならないことも示した。