Anduril Lattice OS에서 영감을 받은 오픈소스 엣지 AI 감시 시스템 OVERWATCH

실용적 조언

다중 카메라 시스템 구축 시 수동 캘리브레이션 대신 RANSAC 기반의 대응점 매칭을 통한 자동 호모그래피 계산을 고려하라.
Jetson 하드웨어에서 성능을 극대화하려면 TensorRT FP16 양자화를 활용하여 추론 속도를 최적화하라.

섹션별 상세

작성자는 YOLOv8n 모델을 TensorRT FP16으로 최적화하여 Jetson Orin Nano에서 실시간 탐지를 구현했다. IP 카메라와 스마트폰 브라우저 등 이기종 센서의 데이터를 입력받아 공통된 인식 파이프라인으로 처리한다. 이를 통해 저비용 하드웨어에서도 고성능 비전 처리가 가능하다는 점을 확인했다.

시스템의 핵심은 RANSAC 알고리즘을 이용한 자가 교정 호모그래피 계산 기능이다. 두 카메라가 동일한 인물을 동시에 포착할 때 발 위치의 대응 쌍을 기록하여 카메라 좌표계 간의 투영 변환을 자동으로 계산한다. 약 5초간의 동시 가시성만 확보되면 별도의 수동 설정 없이도 카메라 위치를 파악하고 융합된 월드 모델을 생성한다.

객체 추적을 위해 적응형 칼만 필터를 도입하여 카메라 간 객체 이동 시에도 연속성을 유지한다. 각 카메라에서 탐지된 데이터를 하나의 통합된 상황도로 융합하여 예측 모델을 구축한다. 카메라가 물리적으로 이동하더라도 시스템이 스스로 이를 감지하고 다시 교정하는 자가 치유 기능을 갖추고 있다.

2020년에는 특수 하드웨어와 수주간의 교정 작업이 필요했던 기술이 2025년 현재는 범용 개발 키트에서 구동 가능하다는 점이 강조되었다. 이는 엔터프라이즈급 기술이 하드웨어 발전과 오픈소스 알고리즘 고도화로 인해 빠르게 대중화되고 있음을 시사한다. 커뮤니티에서는 엣지 AI의 한계치가 어디까지 확장될 수 있을지에 대한 논의가 이어졌다.

용어 해설

호모그래피(Homography): — 서로 다른 두 평면 사이의 투영 관계를 나타내는 행렬이다. 이 프로젝트에서는 여러 카메라가 포착한 2D 이미지를 하나의 공통된 3D 월드 좌표계로 변환하여 객체의 위치를 통합하는 데 사용된다.
랜색(RANSAC): — 데이터셋 내의 이상치(Outlier)를 배제하고 유효한 데이터(Inlier)만을 사용하여 모델 파라미터를 추정하는 알고리즘이다. 카메라 간의 대응점 중 잘못된 매칭을 걸러내고 정확한 투영 변환 행렬을 계산하는 역할을 한다.
칼만 필터(Kalman Filter): — 과거의 상태와 새로운 측정값을 결합하여 객체의 현재 위치를 최적으로 추정하는 수학적 알고리즘이다. 카메라 프레임 사이에서 감지된 객체의 움직임을 예측하고 추적의 연속성을 유지하는 데 필수적이다.
엣지 AI(Edge AI): — 데이터가 생성되는 현장(기기)에서 직접 AI 추론을 수행하는 기술이다. 클라우드 서버로 데이터를 보내지 않고 Jetson Orin Nano와 같은 저전력 하드웨어에서 실시간으로 처리를 완료하여 지연 시간을 최소화한다.

언급된 도구

YOLOv8n추천

객체 탐지 (Object Detection)

TensorRT추천

모델 추론 최적화 엔진

Jetson Orin Nano추천

엣지 AI 연산을 위한 하드웨어 개발 키트

언급된 리소스

GitHubOVERWATCH GitHub Repository