중고 마켓 리스팅 자동 생성을 위한 비전 모델 활용 사례: Qwen3-VL 기반 앱 개발기

이 요약은 AI가 원문을 분석해 생성했습니다. 정확한 내용은 원문 기준으로 확인하세요.

핵심 요약

Qwen3-VL 모델을 활용해 중고 의류 사진에서 브랜드와 상태를 식별하고 판매 정보를 자동 생성하는 앱 개발 과정에서의 기술적 도전과 해결책을 공유했다.

배경

중고 마켓플레이스용 판매글 자동 생성 앱인 'PreSale'을 개발하며, 비전 모델을 통해 의류의 종류, 브랜드, 상태 등을 파악하고 가격을 제안하는 시스템을 구축한 경험을 바탕으로 작성되었다.

의미 / 영향

비전 모델을 이용한 상업적 객체 인식 서비스에서 가장 큰 병목은 시각 정보만으로 판단하기 어려운 주관적 요소와 미세한 도메인 지식이다. 이를 해결하기 위해 파인튜닝이나 멀티모달 프롬프트 전략이 필수적임을 시사한다.

커뮤니티 반응

작성자의 시도에 대해 긍정적인 반응이며, 브랜드 및 상태 판별 문제를 해결하기 위한 파인튜닝 가능성과 데이터셋 확보 방안에 대한 논의가 예상된다.

주요 논점

01중립다수

현재의 제로샷 비전 모델만으로는 상업적 수준의 정밀한 상태 판별과 브랜드 인식이 어렵다.

합의점 vs 논쟁점

합의점

색상 및 대분류 수준의 객체 인식은 현재 비전 모델로 충분히 구현 가능하다.
사용자의 추가 텍스트 입력이 모델의 시각적 한계를 보완하는 핵심 요소이다.

실용적 조언

브랜드 라벨이 보이지 않는 경우 사용자에게 텍스트로 보완 입력을 받도록 설계하여 모델의 추론 오류를 방지할 수 있다.
모델의 일관된 카테고리 분류를 위해 프롬프트 내에 각 품목별 정의를 명확히 규정해야 한다.

섹션별 상세

Qwen3-VL-30B-A3B-Instruct 모델을 Fireworks AI API를 통해 활용하여 의류 사진에서 아이템 유형, 브랜드, 색상, 상태 등을 추출하는 파이프라인을 구축했다. 10,000개 이상의 실제 리스팅 데이터를 기반으로 한 가격 책정 규칙을 시스템 프롬프트에 포함하여 비즈니스 로직을 구현했다.

브랜드 식별의 경우 라벨이나 로고가 명확히 보이는 사진에서는 잘 작동하지만, 의류의 스타일만으로 브랜드를 판단하는 것은 신뢰도가 낮아 사용자에게 텍스트 입력을 병행하도록 유도하고 있다. 상태 판별 역시 육안으로 보이는 큰 마모는 잡으나 '거의 새것'과 '좋은 상태'의 미세한 차이를 구분하는 데 한계가 있어 가격 책정에 어려움을 겪고 있다.

카테고리 분류에서 가디건과 점퍼, 블라우스와 셔츠 등 유사한 품목 간의 혼동이 발생하여 이를 해결하기 위해 매우 구체적인 프롬프트 엔지니어링을 적용했다. 또한 배경이 복잡하거나 여러 아이템이 섞인 사진에서는 성능이 급격히 저하되어 단일 아이템 촬영을 강제하는 방식으로 대응하고 있다.

색상 식별과 기본적인 의류 분류(상의, 하의, 원피스 등)는 매우 안정적으로 작동하며, 사진과 짧은 텍스트 입력('자라 드레스')을 결합했을 때 모델이 시각적으로 놓치는 부분을 보완하여 최상의 결과를 얻을 수 있음을 확인했다.

실무 Takeaway

Qwen3-VL 모델은 기본적인 의류 분류와 색상 인식에서 높은 정확도를 보이지만, 미세한 상태 판별과 스타일 기반 브랜드 인식에는 한계가 있다.
비전 모델 단독 사용보다 사진과 사용자 텍스트 입력을 결합하는 하이브리드 방식이 데이터 정확도를 높이는 데 가장 효과적이다.
복잡한 배경이나 다중 객체 상황에서는 성능이 저하되므로 입력 데이터의 제약 조건을 설정하는 것이 실무적으로 중요하다.

언급된 도구

Qwen3-VL-30B-A3B-Instruct중립

이미지 분석 및 리스팅 정보 생성

Fireworks AI추천

모델 추론을 위한 API 인프라