HydroShear: 경로 의존 접촉 추적로 촉각 전단력을 시뮬레이션하여 접촉 집약적 조작을 시뮬레이션에서 실세계로 전이하는 방법

이 요약은 AI가 원문을 분석해 생성했습니다. 정확한 내용은 원문 기준으로 확인하세요.

TL;DR

로봇의 접촉 집약적 조작에서 촉각 전단력은 그립 안정성과 도구 사용 능력을 결정하는 핵심 요소이나 기존 시뮬레이터는 전단력의 시간적 축적을 정확히 재현하지 못해 시뮬레이션으로 학습한 정책이 실세계로 이전되지 못했다. HydroShear는 hydroelastic 접촉 모델에 경로 의존 힘 추적을 도입하여 센서 표면의 각 접촉점이 언제 닿고 어떻게 변형되는지 이력을 저장하고 그 변형을 마찰·법선력·접선력 필드로 변환함으로써 풀 3차원 전단 동작을 재현한다. 시뮬레이터는 네 가지 보정 매개변수로 실세계 GelSight Mini 데이터에 맞춰 조정하며 GPU 병렬화로 대규모 강화학습에 적합하도록 설계되었다. 이렇게 학습된 정책은 객체 자세 정보를 사용하지 않고 촉각과 관절 상태만으로 실세계에 무수정으로 전이되어 네 가지 과제에서 평균 93퍼센트 성공률을 보였다.

섹션별 상세

로봇의 섬세한 접촉 중심 작업에서 촉각 정보가 부족하면 물체 미끄러짐이나 회전 등 핵심 이벤트를 감지하지 못해 조작 실패가 빈번하게 발생한다. 기존 접근법은 카메라 기반 촉각 센서로 접촉 형상을 추정해 물체의 자세나 형상을 알아내는 데 성공했으나, 실제 조작 능력과 직결되는 힘과 전단력의 시간적 축적을 재현하지 못했다. 물리 기반의 유한요소법은 정확하지만 강화학습 정책 학습을 위한 속도 요건을 충족하지 못했고, 빠른 근사 기법은 전단력의 축적·해소 시점을 놓쳤다. 따라서 촉각 센서로부터 실용적 조작 정책을 획득하려면 속도와 물리적 사실성을 동시에 만족시키는 시뮬레이션 기법이 필요했다.

HydroShear는 기존의 hydroelastic 접촉 모델에 경로 의존(force tracking) 개념을 도입하여 연성 센서 표면의 각 접촉점이 시간에 따라 어떻게 변형되고 힘을 축적하는지를 개별적으로 추적한다. 구체적으로 물체가 센서 위를 움직일 때 접촉이 발생한 순서와 운동 이력을 저장하고 해당 접촉점의 엘라스토머 변형을 물리적으로 계산하여 마찰·슬립·법선력과 접선력으로 변환한다. 이 방식은 기하학적 접촉만을 기반으로 계산하는 순간접촉 접근과 달리 미끄러짐이 시작되는 순간과 전단력 축적 과정을 재현하며 풀 3차원 동작(기울기·롤링·평면 슬라이딩)을 처리한다. 또한 계산은 GPU 병렬화가 가능하도록 설계되어 강화학습 정책 대규모 학습에 적합하다.

HydroShear의 보정은 로봇 팔과 GelSight Mini 같은 비전 기반 촉각 센서를 사용하여 통제된 실험 데이터를 수집하고 네 가지 핵심 매개변수(힘의 확산, 접선·법선력 축적 특성, 엘라스토머-물체 간 마찰계수)를 추정하는 방식으로 이루어졌다. 이렇게 보정된 시뮬레이터에서 학습한 접촉 집약적 강화학습 정책은 실세계에 별도 조정 없이 이전되었고, 네 가지 도전적 작업 전반에서 평균 93퍼센트 성공률을 기록하여 시뮬레이션과 실세계 간 촉각 현실 격차를 크게 줄였다. 본 검증에서는 로봇이 촉각과 관절 상태만으로 작업을 수행하며 물체 포즈 정보는 제공되지 않았다는 점이 실제 응용 가능성을 높였다.

용어 해설

촉각 전단력(Tactile Shear): — 촉각 전단력은 물체가 센서 표면을 따라 미끄러지거나 회전할 때 발생하는 접선 성분의 힘으로, 물체의 미끄러짐과 회전 상태를 판단하고 안정적인 그립과 도구 사용을 위해 필수적이다.
하이드로엘라스틱 접촉 모델(Hydroelastic Contact Model): — 하이드로엘라스틱 접촉 모델은 연성 표면의 접촉을 유체·탄성 거동 관점에서 근사하여 접촉 압력과 변형을 계산하는 방법으로, 연질 센서와 물체의 상호작용을 현실적으로 모사하기 위해 사용된다.
경로 의존 힘 추적(Path-Dependent Force Tracking): — 경로 의존 힘 추적은 접촉 시점의 운동 이력을 기억하여 센서 표면의 각 접촉점이 시간에 따라 어떻게 변형되고 힘을 축적하는지를 개별적으로 계산하는 방식으로, 순간 접촉만으로는 재현되지 않는 마찰·미끄러짐 이벤트를 포착한다.
GelSight 센서(GelSight): — GelSight는 연질 엘라스토머 표면 아래에 카메라를 두어 접촉 시의 미세한 표면 형상과 변형을 시각적으로 캡처하는 비전 기반 촉각 센서 계열로, 접촉 기하와 마찰 상태 추정에 유리하다.
엘라스토머(Elastomer): — 엘라스토머는 탄성 변형이 가능한 고분자 재료로 촉각 센서의 연질 표면을 구성하여 접촉 시 변형으로부터 힘을 유도하며 재료 특성(감쇠·마찰)이 힘 전파에 큰 영향을 준다.

기술

GelSight Mini
GPU

활용 사례

시뮬레이션에서 학습한 섬세한 접촉 기반 로봇 조작 정책의 실세계 전이
타이트한 소켓에 원통형 부품 삽입과 같은 정밀 핸들링 작업
도구 사용이나 물체 회전·미끄러짐을 포함한 복합 조작 기술 학습