Sparkジョブの作成

最終更新日時: 2026/10/27

[Repository] (リポジトリー)ツリービューの[Job Designs] (ジョブ設計)ノードからビッグデータバッチまたはビッグデータStreaming Spark Jobを1つ作成します。

手順

[Job Designs (ジョブデザイン)]ノードを右クリックし、コンテキストメニューで[Create Big Data Batch Job] (ビッグデータバッチジョブを作成)または[Create Big Data Streaming Job (ビッグデータストリーミングジョブ作成)]を選択します。
次に、[New Big Data Batch Job] (新しいビッグデータバッチジョブ)または[New Big Data Streaming Job (新しいビッグデータストリーミングジョブ)]ウィザードが表示されます。
[Framework] (フレームワーク)ドロップダウンリストから、バッチジョブに対しては
プレビュー
[Spark]を、ストリーミングジョブにはSpark Structured Streamingまたは
Availability-noteDeprecated
Spark Streamingを選択します。
[Name] (名前)、[Purpose] (目的)、[Description] (説明)の各フィールドにそれぞれ情報を入力します。ジョブの名前は必須です。
入力が終わると[Finish] (終了)ボタンが有効になります。
ジョブのバージョンを変更する必要がある場合は、[Version] (バージョン)フィールドの横の[M]と[m]ボタンをクリックして変更を行います。
ジョブのステータスを変更する必要がある場合は、[Status] (ステータス)フィールドのドロップダウンリストから選択します。

変更不可能なフィールドの情報を編集する必要がある場合は、メニューバーで[File] (ファイル)> [Edit Project properties] (プロジェクトプロパティを編集)と選択して[Project Settings] (プロジェクト設定)ダイアログボックスを開き、必要な変更を行います。
[Finish] (終了)をクリックしてウィザードを閉じ、変更を有効にします。
Talend Studioワークスペースに空のジョブが開き、Sparkで利用可能なコンポーネントが[Palette] (パレット)に表示されます。

タスクの結果

[Repository] (リポジトリー)ツリービューで、作成されたこのSparkジョブが、[Job Designs] (ジョブデザイン)の下にある[Big Data Batch] (ビッグデータバッチ)ノードの下に自動的に表示されます。

パレットからのコンポーネントをワークスペースに追加してから、ジョブをデザインするために接続して設定します。

Sparkジョブのランタイム環境を設定するには、[Run] (実行)ビューの[Spark configuration] (Spark設定)タブで接続を定義します。詳細は、Spark Batch接続詳細の定義を参照してください。

プレビュー

Spark Structured Streamingジョブについては、Spark Structured Streaming接続詳細の定義を参照してください。

ジョブスクリプトビューにジョブスクリプトを書き込み、ジョブを生成することで、これらのタイプのジョブを作成することも可能です。ジョブスクリプトの使い方の詳細は、Talend ジョブスクリプトリファレンスガイドをご覧ください。

このページは役に立ちましたか?

このページまたはコンテンツにタイポ、ステップの省略、技術的エラーなどの問題が見つかった場合はお知らせください。

こちらにフィードバックをお寄せください