LiteプランのサーバーレスSparkエンジンのプロビジョニング
IBM® watsonx.data LiteプランのインスタンスにサーバーレスSparkエンジンを追加できます。 ネイティブサーバーレスSparkエンジンは、 IBM® watsonx.data 内に存在するコンピュートエンジンである。
watsonx.data ライトプランには外部スパークエンジンを登録できません。
Sparkエンジンを追加するには、以下の手順を実行します。
-
watsonx.data コンソールにログインします。
-
ナビゲーションメニューから、 インフラストラクチャーマネージャーを選択します。
-
Sparkエンジンを追加するには、 Add componentをクリックし、 Nextをクリックします。
-
Add component ページで、 Engines セクションから、 IBM Sparkを選択する。
-
Add component - IBM Spark ページで、以下の詳細を設定する:
a. Add component - IBM Spark ウィンドウで、Sparkエンジンの Display nameを入力します。
b. 登録モードはデフォルトでネイティブのSparkエンジンを作成します。
c. 以下の詳細を設定する:
Sparkエンジンのプロビジョニング フィールド 説明 デフォルトのSparkバージョン アプリケーションの処理に使用する Spark ランタイムのバージョンを選択します。 サポートされているSparkのバージョンについては、「 サポートされているSparkのバージョン 」を参照してください。●Lite版の watsonx.data は、Sparkのバージョン 4.0 をサポートしていません。 エンジンホームバケット 登録されている Cloud Object Storage バケットをリストから選択し、スパークアプリケーションの実行中に生成されるスパークイベントとログを保存します。
Note Spark Engine のホームとして IBM-managed bucket を選択しないように注意してください。 IBM-管理バケットを選択した場合、そのバケットにアクセスしてログを見ることはできません。
詳しくは、 始めにを参照してください。インスタンスリソース割り当て Spark エンジンのメモリ制限を表示します。 Liteプランの場合、8 vCPU と32GBとなる。 値を変更することはできない。 関連カタログ(オプション) エンジンに関連付けなければならないカタログを選択します。 -
「作成」 をクリックします。 エンジンがプロビジョニングされ、 Infrastructure Manager ページに表示されます。
サーバーレス・スパークのTシャツサイズ
Liteプランの場合、デフォルトのインスタンス・リソース・クォータは8 vCPU と32 GB cpuメモリです。 watsonx.data serverless Sparkでは、sparkのランタイムを投稿する際に、事前に定義された以下のSparkドライバとエクゼキュータ vCPU、メモリの組み合わせ(Tシャツのサイズ)のみが許可されます。
以下の表は、サポートされるvCPUとメモリー・サイズの組み合わせを示しています。
1:2の比率 | 1:4の比率 | 1:8の比率 |
---|---|---|
1 vCPU x 2 GB | 1 vCPUx4 GB | 1 vCPUx8 GB |
2 vCPU x 4 GB | 2 vCPUx8 GB | 2 vCPUx16 GB |
3 vCPU x 6 GB | 3 vCPUx12 GB | 3 vCPUx24 GB |
4 vCPU x 8 GB | 4 vCPUx16 GB | NA |
Sparkの詳細ページから、CPUとメモリの使用率をパーセンテージで見ることができます。 詳細を表示するには、 Infrastructure Manager > Sparkエンジンをクリック > Details タブをクリックします。