Accesso ai log di Spark per i lavori di ingestione

Questo argomento fornisce i passaggi necessari per individuare e visualizzare i registri Spark associati ai lavori di ingestione inviati all'interno di IBM® watsonx.data. Accedendo a questi registri, è possibile ottenere informazioni preziose sui dettagli dell'esecuzione, sui potenziali messaggi di errore relativi al processo di ingestione e sulla risoluzione dei problemi dei lavori di ingestione.

Prima di iniziare

Per uno stato Fallito o Finito, è necessario avviare il server della cronologia di Spark per ottenere i dettagli del registro di ingestione. Per ulteriori informazioni, vedere Accesso al server della cronologia di Spark.

Procedura

  1. Accedere alla console watsonx.data.

  2. Dal menu di navigazione, selezionare Gestione dati e fare clic sulla scheda Cronologia delle richieste.

  3. Fare clic su un registro di lavoro specifico per ottenere i dettagli e i registri di quel lavoro di ingestione.

  4. Fare clic su Storia dell'applicazione Spark per ottenere i dettagli del registro in base allo stato del lavoro di ingestione, come segue:

    Avvio: Se il lavoro di ingestione è in stato di Avvio, la cronologia dell'applicazione Spark è disabilitata.

    In esecuzione: Se lo stato del lavoro è in esecuzione, facendo clic sulla cronologia dell'applicazione Spark si accede generalmente all' Spark UI. È possibile monitorare l'avanzamento del lavoro di ingestione, l'utilizzo delle risorse e altri dettagli in tempo reale attraverso questa interfaccia web. Queste informazioni dell Spark UI saranno temporaneamente disponibili solo quando il lavoro è in stato di esecuzione.

    Fallito o Terminato: Se lo stato del lavoro è Fallito o Terminato, facendo clic su Spark application history si accede all'interfaccia Spark history. Questa interfaccia fornisce un riepilogo dell'esecuzione del lavoro di ingestione, compresa la cronologia, l'utilizzo delle risorse e gli eventuali messaggi di errore.

    Annullato: Se il lavoro è stato annullato, la cronologia dell'applicazione Spark viene disattivata.