70개 이상의 언어를 정복한 3.35B 초경량 다국어 모델의 등장
다국어 텍스트 생성 및 대화형 AI3.35B8K 컨텍스트cc-by-nc-4.0
저사양 환경에서도 한국어를 포함한 70개국 이상의 언어를 유창하게 처리하는 3.3B 규모의 고성능 모델입니다.
핵심 역량
- 70개 이상의 다국어 지원 (한국어 포함)
- 3.35B 파라미터의 경량화된 아키텍처
- 8K 입력 및 출력 컨텍스트 길이 지원
- SFT 및 선호도 학습을 통한 대화 최적화
- 슬라이딩 윈도우 어텐션(SWA) 적용으로 효율적 연산
알아두면 좋은 것
- 한국어를 포함하여 전 세계 70개 이상의 언어 데이터로 학습됨
- 복잡한 수학적 추론보다는 오픈 엔드 대화 및 생성 작업에 강력함
- CC-BY-NC-4.0 라이선스로 비상업적 연구 용도로 제공
- Transformers 라이브러리의 pipeline을 통한 간편한 로컬 실행 지원
117
Likes
3.4k
Downloads
0 / 0
조회수
관련 토론
아직 관련 토론이 없습니다.
댓글
댓글을 작성하려면 로그인이 필요합니다.