適用於火花塞引擎 穀麩加速火花塞引擎

Spark 使用者介面

Spark 使用者介面 ( Spark UI ) 可協助您追蹤運行中的 Spark 應用程式的各個面向。

下列清單包含一些範例:

  • 現行執行階段
  • 階段中的作業數
  • 較長執行中階段的原因
  • 階段中的扼殺任務
  • 是否以最佳方式使用應用程式中的執行程式
  • 檢查驅動程式及執行程式的記憶體及磁碟耗用量

使用 Spark 歷程伺服器來檢查已完成 Spark 應用程式的執行。 若要存取 Spark 歷程伺服器,請參閱 存取 Spark 歷程伺服器

存取 Spark UI

  1. 登入 watsonx.data 主控台。

  2. 從導覽功能表中,選取 基礎架構管理程式

  3. 按一下 Spark 引擎的名稱 (從清單視圖或拓蹼視圖)。 即會開啟引擎資訊視窗。

  4. 應用程式 標籤中,選取應用程式,然後按一下應用程式 ID 鏈結。 開啟 Spark UI 開啟。

  5. 您可以查看以下詳細資訊:

    • 事件時間線 會顯示時間表及事件的圖形視圖。
    • 不同的執行階段、使用的儲存體、Spark 環境和執行程式 (記憶體和驅動程式) 詳細資料。

Spark 歷史伺服器使用者介面的 Stages 和 Executors 標籤下的日誌連結無法運作,因為日誌不會與 Spark 事件一起保留。 若要檢視工作和執行記錄,請啟用平台記錄。 如需詳細資訊,請參閱 檢視記錄