Oozie接続を一元管理(非推奨)
このタスクについて
Oozie scheduler (Oozieスケジューラー)を使用してHadoop上のジョブの実行・監視を頻繁に行う場合は、Oozieの設定を[Repository] (リポジトリー)ツリービューの[Metadata] (メタデータ)フォルダーに一元化できます。
前提条件:
-
使用するHadoopディストリビューションを起動し、ディストリビューションとOozieへの適切なアクセス権があるかどうかを確認します。
-
[Hadoop cluster] (Hadoopクラスター)ノードからHadoopディストリビューションへの接続を作成します。詳細は、Hadoop接続を一元管理をご覧ください。
Oozie scheduler (Oozieスケジューラー)は、ジョブの実行スケジュールを立てたり、HDFS上でジョブをデプロイ・実行したり、実行を監視するために使います。Oozie接続を作成するには、次の手順に従います。
手順
-
接続ウィザードが表示されます。ここで、[Name] (名前)、[Purpose] (目的)、[Description] (説明)など、ジェネリックプロパティを入力します。[Status] (ステータス)フィールドは、[File] (ファイル) > [Edit project properties] (プロジェクトプロパティを編集)で定義できます。
-
完了したら、[Next] (次へ)をクリックします。次の手順では、Oozieの接続データを入力します。[End Point] (エンドポイント)フィールドには、使用するHadoop接続のネームノードのホスト名とOozieのポート番号に基づいて生成された、OozieのWebアプリケーションのURLが自動的に入力されます。このWebアプリケーションは、WebブラウザーでOozie Web Console (Oozie Webコンソール)を使ってスケジュールしたジョブの実行ステータスを確認するためにも使用できます。
選択したHadoopディストリビューションでKerberosセキュリティを有効にすると、[User name] (ユーザー名)フィールドが無効になります。このOozie URLは必要に応じて変更できます。
-
[Finish] (終了)をクリックして変更を確定します。
作成したOozieの接続は、[Repository] (リポジトリー)ツリービューの[Hadoop cluster] (Hadoopクラスター)ノードの下に表示されます。
情報メモ注:この[Repository] (リポジトリー)ビューは、使用しているStudioのエディションによって異なる場合があります。
タスクの結果
ここで、[Oozie scheduler] (Oozieスケジューラー)ビューでジョブの[Oozie scheduler] (Oozieスケジューラー)を設定する時に、一元化されたOozie設定を再利用できます。
[Oozie scheduler] (Oozieスケジューラー)でジョブのスケジュールを設定する方法について詳しくは、Oozie経由でジョブを実行(非推奨)をご覧ください。
-
[Create a new repository context] (新しいリポジトリーコンテキストを作成): 現在のHadoop接続からこの環境コンテキストを作成します。つまり、ウィザードで設定するパラメーターは、これらのパラメーターに設定した値と共にコンテキスト変数として取られます。
-
[Reuse an existing repository context] (既存のリポジトリーコンテキストを再利用): 特定の環境コンテキストの変数を使用して現在の接続を設定します。
[Export as context] (コンテキストとしてエクスポート)機能の使用方法の詳細な例は、メタデータのコンテキストとしてエクスポート、およびコンテキストパラメーターを再利用して接続を設定をご覧ください。