Gestión de GPU y aceleradores para VPC
La familia de perfiles optimizados para GPU ofrece un acceso bajo demanda y rentable a las GPU y a los aceleradores. Las GPU y los aceleradores ayudan a acelerar el tiempo de procesamiento necesario para cargas de trabajo que requieren un uso intensivo de recursos computacionales, como la inteligencia artificial, el aprendizaje automático, la inferencia y otras. Para utilizar las GPU y los aceleradores, asegúrate de instalar el controlador adecuado y el kit de herramientas correspondiente a tus cargas de trabajo.
Configuración de una instancia de servidor virtual con una GPU NVIDIA
- Proporcione una instancia de servidor virtual eligiendo un perfil de GPU ( NVIDIA ) en el campo Perfil. Se admiten imágenes de sistema operativo personalizadas y de stock.
- Instale el controlador GPU NVIDIA de la imagen y el perfil de GPU de su instancia de servidor virtual. La siguiente tabla describe los niveles mínimos de controlador y de versión de software CUDA para los sistemas operativos Linux y Windows. Para más información, consulte la página de descarga de controladores de NVIDIA. Para obtener una visión general de los controladores para los productos de centro de datos NVIDIA, consulte NVIDIA Data Center Drivers.
| GPU | NVIDIA conductor | Versión CUDA |
|---|---|---|
| A100 | 550 | 12.4 |
| L4 | 550 | 12.4 |
| L40s | 550 | 12.4 |
| V100 | 535 | 12.2 |
| H100 | 550 | 12.4 |
| H200 | 570 | 12.8 |
| B300 Seleccionar disponibilidad | 590 | 13.1 |
| GPU | NVIDIA conductor | Versión CUDA |
|---|---|---|
| A100 | 538 | 12.2 |
| L4 | 538 | 12.2 |
| L40s | 538 | 12.2 |
| V100 | 535 | 12.2 |
| H100 | N/D | N/D |
| H200 | N/D | N/D |
| B300 | N/D | N/D |
| GPU | NVIDIA conductor | Versión CUDA |
|---|---|---|
| A100 | 529 | 12.0 |
| L4 | 529 | 12.0 |
| L40s | N/D | N/D |
| V100 | 535 | 12.0 |
| H100 | N/D | N/D |
| H200 | N/D | N/D |
| B300 | N/D | N/D |
- Instale el kit de herramientas asociado a la carga de trabajo. Consulta la página de descargas del kit de herramientas CUDA en NVIDIA.
Para obtener instrucciones detalladas para completar los pasos 2 y 3, otras herramientas de GPU y ejemplos, consulte Cómo utilizar V100-Based en IBM Cloud VPC.
Para obtener una guía centrada en Linux sobre la instalación de los controladores de NVIDIA, consulta la NVIDIA Driver Installation Guide.
Si desea automatizar la instalación de los controladores, puede utilizar la sección Datos de usuario del servidor virtual. Utilizando el campo de datos de usuario, puede introducir un script que emita los comandos para instalar los controladores NVIDIA.
Configuración de una instancia de servidor virtual con una GPU NVIDIA B300
NVIDIA Los perfiles de servidor virtual acelerado HGX B300 están disponibles para clientes seleccionados. Cree un caso de asistencia si está interesado en adquirir y utilizar esta oferta.
Cuando se utiliza el perfil de GPU B300, el sistema operativo invitado necesita una actualización. Si no se modifica el SO huésped, es posible que aparezcan errores como "NVRM: Esta región de E/S PCI asignada a su dispositivo NVIDIA no es válida:"
Para configurar el SO invitado para la GPU B300:
- Estos comandos deben ejecutarse como root. Sudo de raíz.
sudo -i - Edita el archivo de configuración de grub. En el siguiente ejemplo se utiliza vi.
vi /etc/default/grub.d/50-cloudimg-settings.cfg - Añada los siguientes parámetros del kernel a la línea
GRUB_CMDLINE_LINUX_DEFAULT:
La línea actualizada debería tener este aspecto:pci=assign-busses pci=realloc pci=nocrs pci=big_root_window# CLOUD_IMG: This file was created/modified by the Cloud Image build process GRUB_CMDLINE_LINUX_DEFAULT="nofb console=ttyS0 console=tty1 pci=assign-busses pci=realloc pci=nocrs pci=big_root_window" - Actualiza grub para aplicar los cambios.
update-grub2 - Reinicie el servidor virtual.
reboot
Configuración de una instancia de servidor virtual con un acelerador de IA Intel Gaudi 3
- Proporcione una instancia de servidor virtual eligiendo el perfil de instancia Intel® Gaudi® 3 AI Accelerator en el campo Perfil. Se admiten imágenes de sistema operativo personalizadas y de stock.
- Instale el software Intel Gaudi 3 AI Accelerator y los controladores para su servidor virtual. Para descargar los controladores, consulte la página de instalación de controladores y software de Intel Gaudi.
Integración de controladores en una imagen personalizada desde el volumen
- Suministre una instancia de servidor virtual con una GPU e instala los controladores.
- Cree una imagen del volumen de arranque de la imagen en stock de la instancia de servidor virtual. Para obtener más información, consulte Creación de una imagen a partir de un volumen.
- Repita la imagen del proceso desde el volumen para desplegar en varias instancias.
Configuración de un servidor bare metal con un acelerador AMD Instinct MI300X
- Crea un servidor bare metal seleccionando el perfil de servidor AMD Instinct™ MI300X Accelerator en el campo Perfil. Se admiten imágenes de sistema operativo personalizadas y de stock.
- Instala los controladores necesarios para tu servidor físico. Para descargar los controladores, consulta la página Instalación de ROCm y marcos de aprendizaje automático.
Próximos pasos
Para obtener más información, consulta la documentación del controlador NVIDIA.