Comma AI와 함께하는 오픈소스 자율 주행의 미래

섹션별 상세

00:42

Comma AI와 OpenPilot의 시작

Harold Schafer는 9년 전 Comma AI에 합류하여 오픈소스 자율 주행 스택인 OpenPilot을 개발해온 과정을 설명했습니다. 초기에는 노트북을 차에 설치해야 할 정도로 복잡했으나, 현재는 전용 하드웨어 장치를 통해 일반 사용자도 쉽게 설치 가능한 수준으로 발전했습니다. OpenPilot은 GitHub에서 가장 인기 있는 로보틱스 프로젝트 중 하나로 성장했으며, 수많은 차량에 오토스티어 및 향상된 어댑티브 크루즈 컨트롤 기능을 제공합니다.

07:40

자율 주행 시스템의 아키텍처와 작동 원리

Comma 장치는 카메라와 컴퓨팅 유닛을 포함하며, 머신러닝 모델이 도로 영상을 입력받아 주행 궤적과 가속도를 출력합니다. 시스템은 차량의 CAN 버스를 리버스 엔지니어링하여 조향, 가속, 제동 신호를 직접 전송하는 카 API 레이어를 통해 작동합니다. 특히 런타임 환경에서는 비디오 입력을 기반으로 곡률과 가속도를 실시간으로 계산하여 차량의 움직임을 제어하는 구조를 갖추고 있습니다.

09:49

엔드투엔드 학습과 시뮬레이션의 역할

Comma AI는 수억 마일의 인간 주행 데이터를 활용하여 비디오 입력에서 직접 행동을 출력하는 엔드투엔드 모델을 학습시킵니다. 단순한 모방 학습의 한계를 극복하기 위해 시뮬레이터 내에서 모델에게 의도적인 오류 상황을 노출시키고 이를 복구하는 방법을 가르칩니다. 이러한 방식은 교통 표지판이나 차선을 개별적으로 인식하는 전통적인 방식보다 더 유연하고 지능적인 주행을 가능하게 합니다.

엔드투엔드 방식은 중간 단계의 객체 인식 과정을 생략하고 전체 시스템을 최적화하는 딥러닝 접근법입니다.

13:15

오픈소스 전략과 상용 시스템과의 차이

OpenPilot은 테슬라의 FSD나 웨이모와 같은 상용 시스템과 경쟁하면서도 오픈소스라는 독특한 위치를 유지합니다. Harold는 연구실에서의 완벽함을 기다리기보다 중간 단계의 유용한 제품을 지속적으로 출시하며 수익을 창출하고 데이터를 수집하는 전략을 강조했습니다. 비록 거대 기업보다 컴퓨팅 자원은 적지만, 실제 사용자들의 주행 데이터를 기반으로 한 빠른 반복 개선이 Comma AI의 핵심 경쟁력임을 확인했습니다.

용어 해설

첨단 운전자 보조 시스템(ADAS): — 운전 중 발생할 수 있는 사고를 예방하기 위해 센서와 카메라를 이용해 위험을 감지하고 제어하는 기술입니다. 차선 이탈 방지나 자동 긴급 제동 등이 포함되며, 완전 자율 주행으로 가는 중간 단계의 기술로 평가받습니다.
엔드투엔드 학습(End-to-End Learning): — 입력 데이터(영상)에서 최종 출력(조향/가속)까지의 과정을 하나의 신경망으로 직접 학습시키는 방식입니다. 중간 단계의 복잡한 규칙 설계 없이 데이터로부터 직접 최적의 행동 패턴을 추출하여 시스템의 유연성을 높입니다.
캔 버스(CAN Bus): — 차량 내 마이크로컨트롤러들이 서로 통신하기 위해 설계된 표준 통신 규격입니다. 자율 주행 장치가 차량의 조향, 가속, 제동 신호를 직접 주고받기 위해 이 네트워크를 리버스 엔지니어링하여 인터페이스를 구축합니다.
모방 학습(Imitation Learning): — 전문가(인간 운전자)의 행동 데이터를 관찰하여 모델이 이를 따라 하도록 학습시키는 기법입니다. 자율 주행에서는 수백만 마일의 인간 주행 데이터를 기반으로 도로 상황에 따른 적절한 주행 궤적을 예측하는 데 사용됩니다.

주목할 인용

“Self-driving was the most interesting applied robotics problem, period.”
자율 주행은 단언컨대 가장 흥미로운 응용 로보틱스 문제입니다.
Harold Schafer·06:18
왜 다른 분야가 아닌 자율 주행 로보틱스에 집중하게 되었는지 설명하며

“We want to make progress along the way, pay our own bills, and ship useful products.”
우리는 과정을 진행하며 진전을 이루고, 스스로 비용을 지불하며, 유용한 제품을 출시하기를 원합니다.
Harold Schafer·15:10
완벽한 자율 주행을 기다리기보다 점진적으로 가치를 제공하는 사업 모델을 강조하며