RUMI, Robotiq 2F-85에 맞춘 시연 장치로 촉각 데이터 수집
프리프린트 논문은 Robotiq 2F-85의 기구 구조에 맞춘 휴대형 시연 장치 RUMI를 제안하고, 촉각 센싱과 AR 시각화, 접촉 시 저항을 주는 기구를 통합했다. 로봇 없이 데이터를 수집한 실험에서 AR과 초기 자세 정렬을 함께 사용하자 관절 한계 위반이 발생한 에피소드가 16/50에서 3/50으로 줄어, 로봇이 재현할 수 있는 시연을 확보할 가능성을 보였다.
저자들은 상용 그리퍼의 기구 구조를 재현한 휴대형 장치로 로봇에 적합한 촉각 시연 데이터를 모으고, 햅틱 피드백으로 물체별 파지력을 조절할 수 있는지를 검증했다.
로봇 없이 휴대형 장치로 시연하면 작업 공간과 관절 한계를 확인하기 어려워 실제 로봇이 따라갈 수 없는 동작이 기록된다. 장치와 로봇 그리퍼의 운동 특성이 달라도 시연 이전에 문제가 생긴다. 원격 조작에서는 접촉 감각이 부족해 깨지기 쉬운 물체와 무거운 물체에 필요한 파지력을 구분하기 어렵다.
UMI 계열은 로봇을 계속 확보하지 않아도 시연을 수집할 수 있지만, 다수 장치가 평행 그리퍼를 전제로 하며 실시간 운동학 피드백을 제공하지 않는다. ActiveUMI는 이미 AR 시각화를 도입했고, UMI-FT는 손가락 힘을 측정하며, MagiClaw와 OmniUMI는 햅틱 기능을 제공했다. RUMI의 차별점은 개별 기능의 최초 제안보다 상용 그리퍼에 맞춰 이들을 결합한 데 있다.
가위형 링크로 Robotiq 2F-85의 비선형 손가락 운동과 장착 구조를 재현했다. CoinFT와 DIGIT 손가락 모듈을 교체할 수 있으며 CoinFT는 200 Hz로 6축 힘과 토크를 측정한다. RealSense D405는 손목 영상을, Meta Quest 3 컨트롤러는 자세 추적을 담당한다. 확장한 IRIS는 QR 기반 좌표 정합과 역기구학을 이용해 MuJoCo 로봇 형상을 표시한다. 원격 접촉이 감지되면 서보가 링크를 잠그고 이후 누르는 힘을 파지력 명령으로 바꾼다. ACT 학습에는 CoinFT로 보정한 임피던스 목표 또는 대조학습 후 고정한 ResNet-18 인코더의 DIGIT 촉각 영상을 사용했다. 저자들은 코드와 자산 링크를 제공했다.
로봇 없는 사용자 실험에는 5명이 참여해 조건별로 각 10회, 총 100개 에피소드를 기록했다. AR과 초기 자세 정렬을 함께 사용한 조건과 AR이 없는 조건의 관절 한계 위반은 3/50 대 16/50, 관절 속도 위반은 11/50 대 29/50이었다. 평균 조작성은 0.055 ± 0.022 대 0.046 ± 0.0057이었다. Robotiq 2F-85를 장착한 실물 Franka FR3에서 센서를 활용한 ACT와 센서 미사용 기준 모델의 성공 횟수는 기어 조립 20/20 대 7/20, 화이트보드 닦기 16/20 대 7/20, 나사 조이기 9/20 대 3/20, 상자 분류 17/20 대 9/20이었다. 과제별 약 100개 시연으로 학습하고 모델별 20회 평가했다. MuJoCo 포장 실험은 약 100개 시연을 사용했으며, 물체별로 피드백 조건마다 100회 평가했다. 힘 증폭 계수는 1.5였다. 햅틱 사용 시 전구와 변압기 블록의 성공률은 각각 94%와 97%, 시연 평균 파지력은 5.66 N과 22.82 N, 정책 실행 평균 파지력은 5.42 N과 19.86 N이었다. 햅틱 미사용 시 시연 평균 파지력은 18.46 N과 15.83 N이었고, 모든 전구 실행에서 시뮬레이션 파손 기준인 10 N을 초과했다.
저자들은 손목 카메라 시점만 사용하는 점과 외력 피드백 부족을 한계로 제시했다. 링크 잠금은 접촉을 알리는 기능이며 외부의 6축 힘과 토크를 재현하지 않는다. 시연 중 흔들림은 나사 조이기에서 접촉 불안정과 미끄러짐을 유발했다. 평가는 단일 로봇 플랫폼, 사용자 5명, 정책별 실물 시험 20회에 한정됐다. 햅틱 파지력 제어의 정량 검증은 시뮬레이션에서 이뤄졌다. 실물 원격 조작 기능은 설명했지만 같은 성능을 입증하지는 않았다. AR 비교는 시각화와 초기 자세 정렬을 함께 바꿔 각 기능의 효과를 분리하지 못했다.
산업 자동화 통합업체와 그리퍼 공급사, 로봇 학습 데이터 업체는 공개 자료를 활용해 지금 연구용 시험을 시작할 수 있다. 특히 Robotiq 2F-85를 사용하는 설비와 연결점이 뚜렷하다. 산업 적용은 1~3년을 검토할 수 있으나, 더 넓은 실물 평가에서 파지력 제어의 재현성, 접촉 시연의 안정성, 작업 공간 좌표 정합의 신뢰성을 확보해야 한다. 이는 산업적 활용 전망이며 상용화 일정은 논문에 보고되지 않았다.
논문 전문
CC BY 4.0 라이선스로 공개된 논문으로, 전문은 출처를 밝혀 영어로 전재했습니다: 전문 보기(영어). 원문은 arXiv:2611.15802(PDF)에서 볼 수 있습니다.