Nvidia DGX-2: NVSwitch verbindet 16 GV100-GPUs für 81.920 Shader

Nvidia hat auf der GTC einen speziellen Chip namens NVSwitch vorgestellt, mit dem 16 GV100-GPUs miteinander verbunden werden können, um die Rechenleistung zu erhöhen. Bei NVSwitch handelt es sich um ein Interconnect Fabric, das mit 900 GB/s fünf Mal so viel Bandbreite wie der aktuell beste PCIe-Switch aufweisen soll.

Switch mit 2 Mrd. 12-nm-Transistoren

NVSwitch basiert auf der professionellen NVLink-2-Verbindung, die mit dem GV100 beziehungsweise der Tesla V100 im Jahr 2017 eingeführt worden war. Der zwei Milliarden Transistoren schwere und im 12-nm-Prozess bei TSMC gefertigte NVSwitch lässt es zu, dass jede GV100-GPU auf den Speicher aller anderen 15 GV100-GPUs zugreifen kann.

1. 

Bild 1 von 6

Zwei PFLOPS mit dem 400.000-USD-System

NVSwitch wird in dem Nvidia-System DGX-2 eingesetzt. Das DGX-2 setzt auf 16 Tesla V100 mit je 32 Gigabyte, die Nvidia ebenfalls heute vorgestellt hat. Insgesamt ergibt sich ein GPU-Cluster mit 81.920 ALUs und einem 512 Gigabyte großen HBM2-Speicher. Die Rechenleistung ist mit 2 PFLOPS für die Tensor-Cores angegeben, die Speicherbandbreite mit 14,4 Terabyte pro Sekunde. 10 Kilowatt soll das System in seinem proprietären Gehäuse aufnehmen, das außer den 16 Nvidia-GPUs zwei Intel Xeon-Platinum-CPUs von unbekanntem Typ, 1,5 Terabyte Systemspeicher und 30 Terabyte NVMe-SSDs beinhaltet. Nvidia spricht von „der weltweit größten GPU“.

Nvidia gibt für das AI-Training des DGX-2 eine zehnfach bessere Performance als mit dem Vorgänger DGX-1 an, was unter anderem auch dem doppeltem Speicher der GV100-GPU zu verdanken ist. Etwa 400.000 US-Dollar wird das System kosten, wenn es im dritten Quartal verfügbar sein wird.