INFORME TÉCNICO

Consideraciones principales para implementar la IA en el perímetro

Evalúa si la informática perimetral es adecuada para tu infraestructura.

Bibliotecas aceleradas por GPU, DataFrame y API:

  • En capas en la parte superior de NVIDIA CUDA, RAPIDS es un conjunto de bibliotecas de software de código abierto y API que proporcionan paralelismo de GPU y velocidad de memoria de gran ancho de banda a través de operaciones de DataFrame y gráficos, logrando aceleraciones de 50 veces o más en flujos de trabajo típicos de ciencia de datos de extremo a extremo. Para Spark 3.0, Spark SQL y DataFrames utilizan nuevas API RAPIDS para planes de consulta y procesamiento de datos en columnas acelerados por GPU y eficientes en memoria.
  • Con Spark 3.0, el optimizador de consultas de Catalyst se ha modificado para identificar operadores dentro de un plan de consulta que se puede acelerar con la API RAPIDS y para programar esos operadores en las GPU dentro del clúster de Spark, al ejecutar el plan de consulta.
  • Una nueva implementación aleatoria de Spark basada en bibliotecas de comunicación aceleradas por GPU, incluido el acceso directo a memoria remota (RDMA), reduce considerablemente la transferencia de datos entre los procesos de Spark. RDMA permite que las GPU se comuniquen directamente entre sí, entre nodos, hasta 100 Gb/s, funcionando como si estuvieran en un servidor masivo.


Programación compatible con GPU en Spark

  • Spark 3.0 agrega integración con los administradores de clústeres (YARN, Kubernetes e independientes) para solicitar a las GPU y a los puntos de complemento que le permitan ejecutar operaciones en la GPU. Esto hace que las GPU sean más fáciles de solicitar y usar para los desarrolladores de aplicaciones de Spark, permite una integración más estrecha con marcos de deep learning e IA como Horovod y TensorFlow en Spark, y permite una mejor utilización de las GPU.

 

La informática perimetral, el proceso de llevar la potencia informática a la ubicación en la que se recopilan los datos, es una de las tendencias de más rápido crecimiento en la industria informática empresarial. Antes de invertir en informática perimetral, las organizaciones deben evaluar si la informática perimetral es adecuada para sus necesidades.

En esta visión general técnica, aprenderás:

  • Cómo evaluar si la informática perimetral es adecuada para tu negocio
  • Qué tener en cuenta antes de implementar la infraestructura perimetral
  • Cómo implementar en el perímetro
  • Qué recursos necesitas para empezar
spark-e-book-thumb-2

DESCARGAR AHORA

  1. Section
Send me the latest enterprise news, announcements, and more from NVIDIA. I can unsubscribe at any time.
PRODUCTOS
TECNOLOGÍAS
Software
RECURSOS