Preference Learning전문가
PrefPI, 선호 피드백만으로 사전학습 로봇 정책을 분포 밖 행동으로 조종
PrefPI는 사전학습된 생성형 로봇 정책을 사용자가 고른 상대적 선호만으로 반복 학습해, 초기 정책이 거의 생성하지 못하는 분포 밖 행동으로 옮기는 프레임워크다. 확산 정책과 PI0.5 플로매칭 VLA를 시뮬레이션과 실물에서 평가했고, 실물 WidowX 로봇에서 물체 운반 높이를 10.7cm에서 19.8cm로 높이면서 작업 성공률을 90% 이상 유지했다. arXiv 프리프린트다.