Para moverse a la velocidad de los negocios, los modelos de HPC a exaescala e IA de billones de parámetros necesitan una comunicación fluida y de alta velocidad entre cada GPU en un clúster de servidores para acelerarse a escala.
La cuarta generación de NVLink es una interconexión de escalabilidad vertical. Ahora, cuando se combina con el nuevo NVLink Switch externo, NVLink Network permite escalar la E/S de múltiples GPU en varios servidores con un ancho de banda de 900 Gigabytes/segundo bidireccional por GPU, más de 7 veces más alto que el ancho de banda de PCIe Gen5. NVLink Network admite clústeres de hasta 256 H100 conectadas y proporciona un ancho de banda 9 veces más alto que InfiniBand HDR en Ampere.
Además, NVLink ahora es compatible con la computación en la red llamada SHARP, que anteriormente solo estaba disponible en Infiniband, y puede proporcionar 1 exaFLOP increíble de computación de IA con baja densidad de FP8, al mismo tiempo que ofrece 57.6 Terabytes/s de ancho de banda All2All.