핵심 요약
산업 현장에서 용접 품질 검사는 구조적 안전을 위해 필수적이지만, 수동 검사는 속도와 정확도 면에서 한계가 있다. 이 가이드는 실시간 객체 탐지 모델인 RF-DETR과 멀티모달 모델인 Gemini를 결합한 2단계 AI 검사 시스템 구축 프로세스를 기술한다. RF-DETR이 결함 위치를 빠르게 파악하면, Gemini가 해당 영역을 정밀하게 확인하여 구체적인 실패 원인과 개선 조치를 출력한다. 이 시스템은 엣지 디바이스에 배포되어 생산 라인에서 100% 전수 검사를 가능하게 한다.
배경
객체 탐지(Object Detection) 기본 개념, Roboflow 플랫폼 사용법, JSON 데이터 구조 이해
대상 독자
제조 공정 자동화 엔지니어 및 컴퓨터 비전 개발자
의미 / 영향
이 시스템은 단순한 불량 판정을 넘어 불량의 원인까지 판별함으로써 제조 공정의 지능형 자동화를 가속화한다. 엣지 컴퓨팅과 VLM의 결합은 고정밀 산업 검사 분야의 새로운 표준이 될 것으로 보인다.
섹션별 상세
이미지 분석

시스템의 전체적인 목표와 Gemini가 생성하는 구조화된 JSON 출력의 형태를 보여준다. 실제 용접 이미지에서 결함을 찾고 그에 대한 구체적인 조치 사항을 텍스트로 변환하는 과정을 요약한다.
비전 AI를 이용한 용접 검사 시스템의 개념도와 Gemini의 출력 예시이다.

Gemini의 출력을 시스템이 활용 가능한 구조화된 필드로 변환하는 로직을 보여준다. good_welding_confidence, primary_issue_detected 등의 필드를 정의하여 데이터 추출을 자동화한다.
Roboflow Workflows 내의 JSON 파서 블록 설정 화면이다.

시스템이 탐지해야 할 실제 결함 사례를 보여준다. 중앙에 수직으로 발생한 균열을 통해 RF-DETR 모델이 학습해야 할 시각적 특징을 확인할 수 있다.
용접 부위에 발생한 실제 균열(Crack)의 근접 촬영 이미지이다.
실무 Takeaway
- RF-DETR과 Gemini를 결합한 하이브리드 구조를 통해 실시간성과 정밀 진단을 동시에 달성한다.
- 조건부 워크플로우를 설계하여 명확한 양호 판정 시 VLM 추론을 생략함으로써 운영 비용을 최적화한다.
- Gemini의 구조화된 출력 기능을 활용해 단순 분류를 넘어선 구체적인 공정 개선 가이드를 자동 생성한다.
언급된 리소스
AI 요약 · 북마크 · 개인 피드 설정 — 무료