에 적용됩니다: 스파크 엔진 글루텐 가속 스파크 엔진

Spark 사용자 인터페이스

스파크 사용자 인터페이스( Spark UI )는 실행 중인 스파크 애플리케이션의 다양한 측면을 추적하는 데 도움이 됩니다.

다음 목록에는 몇 가지 예가 포함되어 있습니다.

  • 현재 실행 중인 스테이지
  • 스테이지의 작업 수
  • 장기 실행 스테이지의 이유
  • 단계에서의 스트랭글러 작업
  • 애플리케이션의 실행 프로그램이 최적으로 사용되는지 여부
  • 드라이버 및 실행 프로그램의 메모리 및 디스크 사용 검사

Spark 히스토리 서버를 사용하여 완료된 Spark 애플리케이션의 실행을 검사하십시오. Spark 히스토리 서버에 액세스하려면 Access Spark 히스토리 서버 를 참조하십시오.

액세스 Spark UI

  1. watsonx.data 콘솔에 로그인하십시오.

  2. 탐색 메뉴에서 인프라 관리자를 선택합니다.

  3. Spark 엔진의 이름을 클릭하십시오 (목록 보기 또는 토폴로지 보기에서). 엔진 정보 창이 열립니다.

  4. 애플리케이션 탭에서 애플리케이션을 선택하고 애플리케이션 ID 링크를 클릭하십시오. 가 Spark UI 가 열립니다.

  5. 다음 세부 정보를 볼 수 있습니다 :

    • 이벤트 시간 라인 은 타임라인 및 이벤트의 그래픽 보기를 표시합니다.
    • 다양한 실행 단계, 사용된 스토리지, Spark 환경 및 실행 프로그램 (메모리 및 드라이버) 세부사항.

스파크 이벤트와 함께 로그가 보존되지 않으므로 스파크 기록 서버 UI의 스테이지 및 실행자 탭 아래의 로그 링크가 작동하지 않습니다. 작업 및 실행자 로그를 검토하려면 플랫폼 로깅을 사용 설정하세요. 자세한 내용은 로그 보기를 참조하세요.