始める前に
- Talend Cloud Pipeline Designerのオペレーターまたは管理者の権限を持っていること。
- Remote Engine Gen2を設定するか、自分のサブスクリプションによってCloud Engine for Designを使用できることを確認すること。手順は、Talend Remote Engine Gen2クイックスタートガイドをご覧ください。
手順
-
[Processing] (処理中)ページを開き、[Engines] (エンジン)タブをクリックします。
-
実行プロファイルを設定するエンジンの名前をクリックします。
-
[Engine details] (エンジンの詳細)ページで[Run profiles] (プロファイルを実行)タブをクリックします。
-
[Add profile] (プロファイルを追加)をクリックします。
-
実行プロファイルを適用するエンジンを選択します。
現在のエンジンがデフォルトで選択されます。
-
[Standard] (標準)実行プロファイルタイプを選択します。
-
実行フレームワークを選択します。
現在のところ、サポートされているのは[Spark local] (Sparkローカル)のみです。
-
プロファイルの名前を入力します。
- オプション:
実行プロファイルの説明を入力します。
-
[Basic configuration] (基本設定)セクションで、マイクロバッチ間隔の数値をミリ秒単位で入力します。
デフォルト値は5000です。
-
実行プロファイルが使用できるスレッド数を入力します。
- オプション:
[Advanced configuration] (詳細設定)セクションで、[Add parameter] (パラメーターを追加)をクリックして、パラメーターを作成します。
-
新しい各パラメーターにパラメーターキーと値を入力します。
例
エグゼキュータープロセスごとに使用するメモリの量を設定するには、パラメーターキーにspark.executor.memory、値のフィールドに16gと入力します。
-
[Save] (保存)をクリックします。
タスクの結果
作成された実行プロファイルが、Talend Cloud Management Consoleのページにリスト表示されます。Talend Cloud Pipeline Designerで、同じ実行プロファイルがパイプラインのドロップダウンリストに表示されます。