Si applica a: Motore a scintilla Glutine accelerato Motore a scintilla

Interfaccia utente Spark

L'interfaccia utente di Spark ( Spark UI ) aiuta a tenere traccia di vari aspetti di un'applicazione Spark in esecuzione.

Il seguente elenco include alcuni esempi:

  • fase di esecuzione corrente
  • numero di attività in una fase
  • motivo per una fase di esecuzione più lunga
  • attività strangler in uno stage
  • se gli executor nell'applicazione vengono utilizzati in maniera ottimale
  • ispezionare l'utilizzo della memoria e del disco del programma di controllo e degli esecutori

Utilizzare il server della cronologia Spark per esaminare l'esecuzione di un'applicazione Spark completata. Per accedere al server della cronologia Spark, consultare Access Spark history server.

Accedere alla sezione Spark UI

  1. Accedere alla console watsonx.data.

  2. Dal menu di navigazione, seleziona Gestore infrastruttura.

  3. Fare clic sul nome del motore Spark (dalla vista elenco o dalla vista topologia). Viene aperta la finestra delle informazioni sul motore.

  4. Nella scheda Applicazioni, selezionare un'applicazione e fare clic sul link ID dell'applicazione. Il Spark UI apre.

  5. È possibile visualizzare i seguenti dettagli:

    • La Linea temporale evento visualizza una vista grafica della sequenza temporale e degli eventi.
    • Diverse fasi di esecuzione, lo storage utilizzato, l'ambiente Spark e i dettagli dell'executor (memoria e driver).

I collegamenti ai registri nelle schede Stages ed Executors dell'interfaccia utente del server storico di Spark non funzionano, poiché i registri non vengono conservati con gli eventi di Spark. Per esaminare i registri delle attività e degli esecutori, attivare la registrazione della piattaforma. Per ulteriori informazioni, vedere Visualizzazione dei registri.