이기종 하드웨어
CPU, GPU, 가속기 등 서로 다른 아키텍처나 성능을 가진 하드웨어들로 구성된 시스템을 의미한다. smolcluster는 이러한 다양한 장치들을 하나의 학습 네트워크로 묶는 기능을 제공한다.
파이썬 소켓만으로 구현한 분산 학습 알고리즘의 모든 것