robustness benchmark for vision-language-action models中級
LIBERO-Pro2.0:条件が変わるとロボット基盤モデルの成功率は平均26.5ポイント低下(華中科技大、清華大)
華中科技大学と清華大学などはプレプリントで、LIBEROベンチマークで63.8から98.5%を出すロボット制御モデル17種が、作業途中に物体、目標、カメラ、ロボット状態を変えると成功率が平均26.5ポイント下がったと報告した。Physical Intelligenceのpi0.5を頑健性の教示80件で微調整すると、未知の摂動課題での成功率は70.1%となり、既存方策の28.0から47.9%を上回った。