파라미터 서버 아키텍처
분산 학습 환경에서 모델 파라미터를 관리하는 중앙 서버(Master)와 실제 계산을 수행하는 워커(Worker) 노드로 역할을 분리한 구조입니다. 대규모 모델의 병렬 학습 효율을 높이는 데 사용됩니다.