Depurar o aplicativo Spark

Aplica-se a: Motor de faísca Motor de faísca acelerado com glúten

O início do Mecanismo (depósito que você passou durante o fornecimento do mecanismo Spark) permite monitorar e depurar o aplicativo Spark. O início do mecanismo contém logs e eventos de faísca para todos os aplicativos do Spark enviados no mecanismo

O procedimento a seguir detalha as etapas para visualizar os logs de um aplicativo Spark

1. Efetue login em sua conta do IBM Cloud e navegue até o depósito inicial do mecanismo por meio da instância do armazenamento de objetos do Cloud
2. Vá para o caminho raiz do depósito de armazenamento Navegue para o caminho spark /<spark-engine-id>/logs para revisar os logs dos aplicativos Spark enviados Aqui, <spark-engine-id> é o ID do mecanismo no qual o aplicativo é executado
3. Para cada aplicativo enviado no mecanismo Spark, um subcaminho é criado com o ID do aplicativo para armazenar os arquivos de log do driver e do executor do aplicativo Spark.
4. Para revisar os logs, faça download do arquivo de log do driver e dos executores a partir do console de armazenamento de objeto do Cloud