UMI가 무엇인가
로봇 조작 정책은 결국 데이터로 만들어집니다. 그런데 그 데이터를 모으려면 로봇이 필요하고, 로봇이 필요한 순간 데이터를 모을 수 있는 장소는 실험실 안으로 쪼그라듭니다.
UMI(Universal Manipulation Interface) 는 이 고리를 끊은 인터페이스입니다. 사람이 손에 드는 집게(gripper) 하나에 카메라를 달아 현장에서 시연을 모으고, 그렇게 모은 데이터를 미세조정 없이 여러 로봇 몸체에 그대로 배포합니다. 데이터 수집에서 로봇을 떼어내되, 떼어낸 데이터가 로봇에 다시 붙게 만드는 설계입니다.
이 한 편이 열어젖힌 방향을 여러 연구팀이 각자의 각도로 밀어붙였고, 그 결과 하나의 계보가 만들어졌습니다. 이 시리즈는 그 계보를 원조부터 순서대로 따라갑니다.
계보가 갈라진 지점들
원조 UMI가 남긴 한계 목록이 곧 다음 세대의 과제 목록이 됐습니다.
- 설치가 어렵다 → ORB-SLAM3를 시판 추적 모듈로 갈아끼운 FastUMI
- 촉각이 없다 → 촉각 센서와 표현학습을 함께 설계한 exUMI
- 손목 시야 밖은 못 본다 → 3인칭 시점을 더한 MV-UMI
- 이동형 조작기를 지원하지 않는다 → 걷기 성분을 상쇄한 Mobile UMI
- 그래도 집게는 들어야 한다 → 맨손 영상을 집게 영상으로 번역한 RwoR
- 무늬 없는 야외에서 취약하다 → 과수원에서 실측하고 고친 농업용 저가 하드웨어
- 사람 손보다 느리다 → 집게 설계가 시연 품질에 미치는 영향을 사람 대상으로 잰 연구
읽는 순서
1편의 원조 UMI부터 읽는 것을 권합니다. 나머지 일곱 편은 전부 원조가 세운 설계 — 어안 카메라, 상대 궤적 행동 표현, 지연 정합 — 를 어디서 어떻게 바꿨는지로 자기 위치를 설명하기 때문입니다.
각 글은 논문 원본 그림을 그대로 싣고, 수치는 원문 값을 그대로 옮겼습니다.