97M 파라미터로 구현한 IBM의 초경량 고성능 다국어 임베딩 모델
문장 임베딩 및 특성 추출97Mapache-2.0
ModernBERT 아키텍처를 기반으로 50개 이상의 언어를 지원하며 효율적인 텍스트 임베딩과 유사도 검색을 수행하는 97M 규모의 경량 모델이다.
핵심 역량
- 50개 이상의 다국어 텍스트 임베딩
- 문장 간 유사도 측정
- 시맨틱 검색 및 정보 검색
- 텍스트 분류를 위한 특성 추출
강점
- 97M의 초경량 크기로 낮은 지연 시간과 적은 메모리 점유 실현
- Sentence-Transformers 라이브러리와의 완벽한 호환성
- Apache 2.0 라이선스를 통한 자유로운 비즈니스 활용
훈련 방식
ModernBERT 기반 아키텍처에 Granite 시리즈의 다국어 학습 전략을 적용하여 50개 이상 언어 코퍼스로 학습
알아두면 좋은 것
- 한국어를 포함한 전 세계 50개 이상의 주요 언어 지원
- ModernBERT 아키텍처 채택으로 기존 인코더 모델 대비 효율성 개선
- ONNX 및 OpenVINO 호환으로 다양한 하드웨어 가속 지원
- Apache 2.0 라이선스로 상업적 이용 및 수정 가능
83
Likes
4.5k
Downloads
0 / 0
조회수
관련 토론
아직 관련 토론이 없습니다.
댓글
댓글을 작성하려면 로그인이 필요합니다.