TL;DR
dots3-note preview는 dots3 계열의 첫 open-weight 모델로, Mixture-of-Experts 구조에서 총 280B 파라미터 중 16B를 활성화한다. 최대 512K tokens의 context length를 지원하며 텍스트·이미지·비디오·오디오를 이해하고 텍스트를 출력한다. 공개된 정보는 모델의 규모, 활성화 범위, 입력 형식을 중심으로 구성되며 성능 benchmark나 재현 결과는 포함하지 않는다.
섹션별 상세
용어 해설
- Mixture-of-Experts
- — 전체 파라미터를 여러 전문가 모듈로 나누고 입력마다 일부 모듈만 활성화하는 모델 구조입니다. 총 파라미터 규모를 크게 유지하면서 실제 연산에 참여하는 파라미터 수를 줄이는 방식으로, 이 글에서는 280B 중 16B가 활성화됩니다.
- 활성화 파라미터(Activated Parameters)
- — 모델이 특정 입력을 처리할 때 실제 계산에 참여하는 파라미터입니다. Mixture-of-Experts 구조에서는 전체 파라미터보다 활성화 파라미터가 적을 수 있으며, dots3-note preview는 총 280B 중 16B를 활성화합니다.
- 컨텍스트 길이(Context Length)
- — 모델이 한 번의 처리에서 참고할 수 있는 입력 토큰의 최대 범위입니다. 컨텍스트 길이가 길면 긴 문서나 대화 기록을 한 번에 전달할 수 있으며, 이 모델은 최대 512K tokens를 지원합니다.
- 멀티모달 모델(Multimodal Model)
- — 텍스트뿐 아니라 이미지·비디오·오디오처럼 서로 다른 유형의 입력을 함께 처리하는 모델입니다. dots3-note preview는 네 가지 입력 형식을 이해하고 결과는 텍스트로 생성합니다.
AI 요약 · 북마크 · 개인 피드 설정 — 무료
출처 · 인용 안내
인용 시 "요약 출처: AI Trends (aitrends.kr)"를 표기하고, 사실 확인은 원문 보기 기준으로 진행해 주세요. 자세한 기준은 운영 정책을 참고해 주세요.

