IBM Cloud Docs
LiteプランのサーバーレスSparkエンジンのプロビジョニング

LiteプランのサーバーレスSparkエンジンのプロビジョニング

IBM® watsonx.data LiteプランのインスタンスにサーバーレスSparkエンジンを追加できます。 ネイティブサーバーレスSparkエンジンは、 IBM® watsonx.data 内に存在するコンピュートエンジンである。

watsonx.data ライトプランには外部スパークエンジンを登録できません。

Sparkエンジンを追加するには、以下の手順を実行します。

  1. watsonx.data コンソールにログインします。

  2. ナビゲーションメニューから、 インフラストラクチャーマネージャーを選択します。

  3. Sparkエンジンを追加するには、 Add componentをクリックし、 Nextをクリックします。

  4. Add component ページで、 Engines セクションから、 IBM Sparkを選択する。

  5. Add component - IBM Spark ページで、以下の詳細を設定する:

    a. Add component - IBM Spark ウィンドウで、Sparkエンジンの Display nameを入力します。

    b. 登録モードはデフォルトでネイティブのSparkエンジンを作成します。

    c. 以下の詳細を設定する:

    Sparkエンジンのプロビジョニング
    フィールド 説明
    デフォルトのSparkバージョン アプリケーションの処理に使用する Spark ランタイムのバージョンを選択します。 サポートされているSparkのバージョンについては、「 サポートされているSparkのバージョン 」を参照してください。●Lite版の watsonx.data は、Sparkのバージョン 4.0 をサポートしていません。
    エンジンホームバケット 登録されている Cloud Object Storage バケットをリストから選択し、スパークアプリケーションの実行中に生成されるスパークイベントとログを保存します。
    Note Spark Engine のホームとして IBM-managed bucket を選択しないように注意してください。 IBM-管理バケットを選択した場合、そのバケットにアクセスしてログを見ることはできません。
    詳しくは、 始めにを参照してください。
    インスタンスリソース割り当て Spark エンジンのメモリ制限を表示します。 Liteプランの場合、8 vCPU と32GBとなる。 値を変更することはできない。
    関連カタログ(オプション) エンジンに関連付けなければならないカタログを選択します。
  6. 「作成」 をクリックします。 エンジンがプロビジョニングされ、 Infrastructure Manager ページに表示されます。

サーバーレス・スパークのTシャツサイズ

Liteプランの場合、デフォルトのインスタンス・リソース・クォータは8 vCPU と32 GB cpuメモリです。 watsonx.data serverless Sparkでは、sparkのランタイムを投稿する際に、事前に定義された以下のSparkドライバとエクゼキュータ vCPU、メモリの組み合わせ(Tシャツのサイズ)のみが許可されます。

以下の表は、サポートされるvCPUとメモリー・サイズの組み合わせを示しています。

サポートされる vCPU とメモリ・サイズの組み合わせ
1:2の比率 1:4の比率 1:8の比率
1 vCPU x 2 GB 1 vCPUx4 GB 1 vCPUx8 GB
2 vCPU x 4 GB 2 vCPUx8 GB 2 vCPUx16 GB
3 vCPU x 6 GB 3 vCPUx12 GB 3 vCPUx24 GB
4 vCPU x 8 GB 4 vCPUx16 GB NA

Sparkの詳細ページから、CPUとメモリの使用率をパーセンテージで見ることができます。 詳細を表示するには、 Infrastructure Manager > Sparkエンジンをクリック > Details タブをクリックします。