Se aplica a: motor Spark Motor Spark acelerado por gluten
Interfaz de usuario Spark
La interfaz de usuario de Spark ( Spark UI ) le ayuda a realizar un seguimiento de varios aspectos de una aplicación Spark en ejecución.
La lista siguiente incluye algunos ejemplos:
- etapa de ejecución actual
- número de tareas en una etapa
- razón de una etapa de ejecución más larga
- tarea strangler en una etapa
- si los ejecutores de la aplicación se utilizan de forma óptima
- inspeccionar en la memoria y el consumo de disco del controlador y ejecutores
Utilice el servidor de historial de Spark para inspeccionar la ejecución de una aplicación Spark completada. Para acceder al servidor de historial de Spark, consulte el servidor de historial de Spark de acceso.
Acceso a la Spark UI
-
Inicie una sesión en la consola de watsonx.data.
-
En el menú de navegación, seleccione Gestor de infraestructuras.
-
Pulse el nombre del motor de Spark (desde la vista de lista o la vista de topología). Se abre la ventana de información del motor.
-
En la ficha Aplicaciones, seleccione una aplicación y pulse el enlace ID de la aplicación. Se abre Spark UI abre.
-
Puede consultar los siguientes datos :
- La Línea de tiempo de suceso muestra una vista gráfica de la línea temporal y los sucesos.
- Diferentes etapas de ejecución, el almacenamiento utilizado, el entorno de Spark y los detalles del ejecutor (memoria y controlador).
Los enlaces de registro en las pestañas Etapas y Ejecutores de la interfaz de usuario del servidor histórico de Spark no funcionarán, ya que los registros no se conservan con los eventos de Spark. Para revisar los registros de tareas y ejecutores, active el registro de la plataforma. Para más detalles, consulte Visualización de registros.