S'applique à: Moteur d'allumage Gluten accéléré Moteur d'allumage

Interface utilisateur Spark

L'interface utilisateur Spark ( Spark UI ) vous aide à suivre les différents aspects d'une application Spark en cours d'exécution.

La liste suivante contient quelques exemples:

  • étape en cours d'exécution
  • nombre de tâches dans une étape
  • raison d'une phase d'exécution plus longue
  • tâche d'étrangleur dans une étape
  • si les programmes d'exécution de l'application sont utilisés de manière optimale
  • inspecter la consommation de mémoire et de disque du pilote et des programmes d'exécution

Utilisez le serveur d'historique Spark pour inspecter l'exécution d'une application Spark terminée. Pour accéder au serveur d'historique Spark, voir Accès au serveur d'historique Spark.

Accéder à la Spark UI

  1. Connectez-vous à la console watsonx.data.

  2. Dans le menu de navigation, sélectionnez Gestionnaire d'infrastructure.

  3. Cliquez sur le nom du moteur Spark (à partir de la vue de liste ou de la vue de topologie). La fenêtre d'informations sur le moteur s'ouvre.

  4. Dans l'onglet Applications, sélectionnez une application et cliquez sur le lien ID de l'application. Les Spark UI s'ouvre.

  5. Vous pouvez consulter les détails suivants :

    • La Ligne de temps de l'événement affiche une vue graphique de la chronologie et des événements.
    • Différentes étapes d'exécution, le stockage utilisé, l'environnement Spark et les détails de l'exécuteur (mémoire et pilote).

Les liens vers les journaux sous les onglets Stages et Executors de l'interface utilisateur du serveur d'historique Spark ne fonctionneront pas car les journaux ne sont pas conservés avec les événements Spark. Pour consulter les journaux des tâches et des exécuteurs, activez la journalisation de la plate-forme. Pour plus d'informations, voir Consultation des journaux.