본문으로 건너뛰기

model-size

모델 규모

모델 규모는 파라미터 수와 아키텍처 복잡도를 합쳐 표현하는 개념으로, 동일 아키텍처에서 파라미터 수가 증가하면 표현 능력이 커질 수 있다. 다만 규모 확대는 학습 비용·추론 비용·엔지니어링 난이도를 함께 증가시키므로 성능 이득 대비 비용을 고려해야 한다. 기사에서는 중국 기업들이 미국 선도 연구실과 규모 경쟁을 벌이는 맥락에서 모델 규모를 강조하고 있다.