Meta SAM 3.1 공개: 128개 객체 추적 속도 7배 향상과 오픈 보캐브러리 확장
마스크 생성 및 비디오 객체 세그멘테이션other
이미지와 비디오에서 텍스트나 시각적 프롬프트로 객체를 감지, 분할, 추적하며 다중 객체 처리 속도를 혁신적으로 개선한 모델이다.
핵심 역량
- 텍스트 프롬프트 기반 객체 분할
- 시각적 프롬프트(점, 박스, 마스크) 기반 객체 추적
- 오픈 보캐브러리 기반 광범위한 객체 인식
- 다중 객체 동시 추적 및 세그멘테이션
강점
- H100 GPU에서 128개 객체 대상 7배 빠른 추론 속도
- 오픈 보캐브러리 개념 처리 능력 50배 확장
- 주요 VOS 벤치마크 6/7 항목에서 기존 모델 대비 우위
훈련 방식
SAM 3 기반의 Object Multiplex 공유 메모리 기법 적용 및 비디오 객체 세그멘테이션(VOS) 성능 최적화
알아두면 좋은 것
- Object Multiplex 기술로 다중 객체 추론 효율 극대화
- 7개 VOS 벤치마크 중 6개에서 성능 향상 확인
- 기존 대비 50배 이상의 고유 개념 처리 가능
- Meta의 별도 라이선스 동의 및 게이팅 절차 필요
139
Likes
15.4k
Downloads
0 / 0
조회수
관련 토론
아직 관련 토론이 없습니다.
댓글
댓글을 작성하려면 로그인이 필요합니다.