VLM preference feedback for robot reinforcement learning전문가
비전언어모델이 로봇 시도를 비교 채점: SPEAR, 조작 성공률 88.9%로 기존 방식보다 23.8%포인트 높아
홍콩대 연구진의 프리프린트 SPEAR는 공개 비전언어모델을 심판으로 써 로봇의 두 시도 중 어느 쪽이 나은지 비교하게 하는 방식으로, Meta-World 조작 과제 6개에서 평균 최종 성공률 88.9%를 기록했다. 가장 비슷한 기존 방식 RL-VLM-F는 65.1%였다. 질문 수는 41.5% 줄고 답변 거부율은 절반 아래로 낮아졌으며, 실제 Mobile ALOHA 로봇팔로 과제 3개를 처음부터 학습했다.