Descarga de los registros

Para descargar los registros desde el inicio de la instancia, ejecute el mandato siguiente utilizando la CLI de AWS. Para obtener más información sobre cómo utilizar la CLI, consulte Configurar la CLI para conectarse a Object Storage.

aws --endpoint-url <bucket_endpoint> s3 cp s3://<bucket_name>/<instance_id>/logs/<app_id>/ ./ --recursive

Ejemplo:

aws --endpoint-url https://s3.us-south.cloud-object-storage.appdomain.cloud/ s3 cp s3://do-not-delete-ae-bucket-a0048029-c78a-439a-a864-14fdd3b2d95b/a0048029-c78a-439a-a864-14fdd3b2d95b/logs/2cd9036a-9e4a-4b79-81ec-2d8ae96d674c/ ./ --recursive

Cambio del nivel de registro de Spark

Puede editar spark log level configuration para establecer distintos niveles de registro como INFO, DEBUG para los registros de controlador y ejecutor que se reenvían al inicio de la instancia.

Inhabilite completamente la característica de registro especificando el siguiente controlador y (o) el nivel de registro del ejecutor.

ae.spark.driver.log.level = OFF
ae.spark.executor.log.level = OFF

Para obtener más información sobre cómo configurar la información de nivel de registro, consulte Configuración de la información de nivel de registro de Spark.

De forma predeterminada, el nivel de registro del controlador es WARN y el nivel de registro del ejecutor es OFF. Sólo puede ver los registros del controlador en el inicio de la instancia, si no se especifica la configuración de nivel de registro de Spark. Para incluir los registros del ejecutor, cambie el nivel de registro a un valor distinto de OFF. Para obtener más información, consulte Configuración de la información de nivel de registro de Spark.

Además, también puede elegir reenviar registros al servicio IBM Log Analysis. Para obtener más información, consulte Reenvío de registros a IBM Log Analysis. Si la información de nivel de registro de controlador o ejecutor está configurada como 'OFF', los registros no se reenvían al servicio IBM Log Analysis aunque esté habilitado a través de las API de registro.