與 IBM Manta Data Lineage 集成

將 Manta 與 watsonx.data 集成，您可以透過 Manta UI 從 Spark 和 Presto 捕獲和發布作業、運行和資料集事件，從而提供對資料流和轉換的完整可見性。

開始之前

  • 建立資料來源定義和 OpenLineage 連線。
  • 在您的專案中建立 OpenLineage 元資料導入並運行它。

有關更多信息，請參閱 為 IBM Manta Data Lineage 準備數據。

程序

  1. 登入 watsonx.data 主控台。

  2. 從導覽功能表中，前往設定 > IBM Manta Data Lineage。

  3. 輸入下列詳細資料：

    IBM Manta Data Lineage集成
    欄位 說明
    譜系攝取端點 輸入啟動資料沿襲服務的 IBM Cloud 主機端點 URL。
    API 金鑰 輸入 API 金鑰。 有關產生 API 金鑰的信息，請參閱 建立 API 金鑰

  4. 按一下儲存以儲存詳細資訊。 您可以透過點擊 「編輯」 來編輯已儲存的詳細資訊。

  5. 按一下 「啟用」 以啟用 Manta Data Lineage。

資料沿襲對啟用後啟動的新作業生效。 先前和正在進行的作業將不會顯示資料沿襲。 目前，它支援在 Manta Data Lineage 中查看 CREATE TABLE AS (CTAS) 和 INSERT INTO SELECT 操作的沿襲。

下一步

  • 您可以查看資產的資料沿襲。 有關更多信息，請參閱 查看數據沿襲。
  • 您可以管理和調整譜系圖，以獲得對資料管道的全面可見性和控制。 有關更多信息，請參閱 管理數據沿襲圖。