Spark 애플리케이션 디버그

에 적용됩니다: 스파크 엔진 글루텐 가속 스파크 엔진

엔진 홈 (Spark 엔진 프로비저닝 중에 전달한 버킷) 을 사용하여 Spark 애플리케이션을 모니터하고 디버그할 수 있습니다. 엔진 홈에는 엔진에서 제출된 모든 Spark 애플리케이션에 대한 로그 및 Spark 이벤트가 포함되어 있습니다.

다음 프로시저는 Spark 애플리케이션의 로그를 보기 위한 단계를 자세히 설명합니다.

1. IBM Cloud 계정에 로그인하고 Cloud 오브젝트 저장소 인스턴스에서 엔진 홈 버킷으로 이동하십시오.
2. 스토리지 버킷의 루트 경로로 이동하십시오. spark/<spark-engine-id>/logs 경로로 이동하여 제출된 Spark 애플리케이션의 로그를 검토하십시오. 여기서 <spark-engine-id> 는 애플리케이션이 실행되는 엔진의 ID입니다.
3. Spark 엔진에서 제출된 각 애플리케이션의 경우 Spark 애플리케이션의 드라이버 및 실행 프로그램 로그 파일을 저장하기 위해 애플리케이션 ID를 사용하여 하위 경로가 작성됩니다.
4. 로그를 검토하려면 Cloud 오브젝트 스토리지 콘솔에서 드라이버 및 실행 프로그램 로그 파일을 다운로드하십시오.