All-to-All Bandwidth
All-to-All 대역폭
한 GPU가 다른 GPU들과 동시에 데이터를 주고받을 수 있는 통신 용량이다. 글에서는 GB200 및 GB300 NVL72가 GPU당 1,800 GB/s의 all-to-all bandwidth를 제공해 72개 GPU가 하나의 계산 자원처럼 협력한다고 설명한다.
All-to-All 대역폭
한 GPU가 다른 GPU들과 동시에 데이터를 주고받을 수 있는 통신 용량이다. 글에서는 GB200 및 GB300 NVL72가 GPU당 1,800 GB/s의 all-to-all bandwidth를 제공해 72개 GPU가 하나의 계산 자원처럼 협력한다고 설명한다.