인간 참여형 머신러닝(HITL ML)이란 무엇인가?

섹션별 상세

01

순수 자동화 파이프라인은 모델이 자신의 오류로부터 학습하여 편향이 강화되는 문제를 안고 있습니다. HITL 파이프라인은 정의된 체크포인트에서 인간이 개입하여 모델 출력을 수정하고 모델이 학습해야 할 사례를 선별함으로써 이 루프를 끊습니다. 수정된 데이터는 다시 학습에 투입되어 모델의 정확도를 지속적으로 향상시키는 선순환 구조를 만듭니다. 결과적으로 자동화가 취약한 부분에 인간의 노력을 집중시켜 전체 시스템의 가치를 극대화합니다.

02

자율주행 모델은 고속도로 주행 같은 일반적 상황은 잘 처리하지만 도로 위 낙하물이나 무단횡단 같은 엣지 케이스에서 실패할 확률이 높습니다. 자동화 시스템은 학습 데이터에 없던 희귀 시나리오를 놓치기 쉽지만, 인간 검수자는 맥락을 이해하여 이러한 위험 요소를 정확히 식별하고 주석을 달 수 있습니다. HITL은 모든 프레임을 전수 조사하지 않고도 중요한 시나리오에만 정밀한 주석 작업을 할당하여 효율성을 확보합니다.

자율주행 차량의 교차로 접근 상황에 대한 LiDAR 센서 시각화 및 도로 요소 주석 — Diagram복잡한 교차로 시나리오에서 다양한 객체와 도로 경계가 어떻게 3D 공간에 매핑되는지 보여줍니다. 자율주행 모델이 직면하는 복잡한 환경과 이를 정확히 라벨링하기 위한 HITL의 중요성을 설명하는 데 사용됩니다.

03

자율주행 데이터는 카메라, LiDAR, 레이더 등 다중 센서의 일관성을 유지하는 것이 매우 까다로운 작업입니다. 3D 포인트 클라우드에서 그려진 큐보이드는 모든 카메라 이미지 투영 결과와 일치해야 하며, 프레임 간 트랙 ID도 일치해야 합니다. 자동화 시스템이 놓치기 쉬운 센서 간 정렬 오류나 캘리브레이션 문제를 인간이 동기화된 뷰를 통해 검증함으로써 데이터 오염을 사전에 방지합니다.

카메라 2D 주석과 LiDAR 3D 주석의 비교 화면 — Screenshot2D 이미지상의 바운딩 박스와 3D 포인트 클라우드상의 큐보이드 주석이 어떻게 상호작용하는지 보여줍니다. 이는 본문에서 강조한 멀티 센서 데이터의 교차 모달 일관성(Cross-modal consistency) 검증의 필요성을 시각적으로 뒷받침합니다.

04

능동 학습(Active Learning)은 HITL 시스템의 효율성을 극대화하는 핵심 메커니즘으로 작동합니다. 모든 데이터를 무작위로 검수하는 대신 모델의 확신도가 낮은 샘플이나 데이터 분포에서 희귀한 사례를 알고리즘이 우선적으로 추출하여 인간에게 전달합니다. 이를 통해 검수자는 전체 데이터의 약 5%에 해당하는 핵심 사례에만 집중하면서도 모델 성능 개선 효과를 극대화할 수 있습니다.

05

Kognic의 플랫폼은 자동화된 사전 주석(Pre-annotation)을 시작점으로 활용하여 인간의 작업 부하를 줄이는 전략을 취합니다. 검수자가 처음부터 주석을 다는 대신 모델이 생성한 예측값을 수정하는 방식을 통해 주석 처리량을 3~5배까지 높일 수 있습니다. 특히 복잡한 멀티 센서 장면에서 이러한 방식은 수동 작업 대비 주석 시간을 최대 68%까지 단축하는 성과를 보여줍니다.

Kognic 플랫폼에서 3D 포인트 클라우드 데이터를 검수하는 작업 화면 — Screenshot실제 인간 검수자가 사용하는 인터페이스를 통해 모델의 사전 주석을 어떻게 확인하고 수정하는지 보여줍니다. 본문에서 언급된 '사전 주석을 시작점으로 한 검수 작업'의 실제 구현 사례를 제시합니다.

기술

Kognic Platform
LiDAR
VLM
VLA

활용 사례

자율주행 엣지 케이스 식별
멀티 센서 데이터 정렬 검증
고품질 평가 데이터셋(Gold Standard) 구축
VLM/VLA 모델을 위한 언어 그라운딩

언급된 리소스

튜토리얼Camera vs LiDAR Annotation: When to Use Each

문서Top 5 Scale AI Alternatives for Autonomous Driving Annotation