Hadoopクラスターメタデータ定義を作成すれば、Hadoopクラスター情報でコンポーネントをすばやく設定できるようになります。また、Talend Studioを使うことでクラスターメタデータ定義をインポートできるようになります。
始める前に
- このチュートリアルではHadoopクラスターを活用します。Hadoopクラスターが利用可能であることが必要です。
- [Integration] (統合)パースペクティブ()を選択します。
手順
-
[Repository] (リポジトリー)ツリービューで[Metadata] (メタデータ)を展開し、[Hadoop Cluster] (Hadoopクラスター)を右クリックして[Create Hadoop Cluster] (Hadoopクラスターの作成)をクリックします。
-
[Name] (名前)フィールドに名前を入力します。
例
MyHadoopCluster
- オプション:
[Purpose] (目的)フィールドに目的を入力します。
例
クラスター接続メタデータ
- オプション:
[Description] (説明)フィールドに説明を入力します。
例
Metadata to connect to a Amazon EMR cluster
情報メモヒント: [Purpose] (目的)と[Description] (説明)を入力して整理します。
-
[Next] (次へ)をクリックします。
-
[Distribution] (ディストリビューション)を選択します。
例
Amazon EMRとEMR 5.15.0 (Hadoop 2.8.3)を選択します。
-
[Version] (バージョン)を選択します。
例
EMR 5.15.0 (Hadoop 2.8.3)を選択します。
-
[Enter manually Hadoop services] (Hadoopサービスを手動で入力)を選択します。
-
[Finish] (終了)をクリックします。
[Hadoop Cluster Connection] (Hadoopクラスター接続)ウィンドウが表示されます。
-
[Connection] (接続)情報を入力します。
例
- [Namecode URI] (ネームコードURI): hdfs://hadoopcluster:8020
- [Resource Manager] (リソースマネージャー): hadoopcluster:8032
- [Resource Manager Scheduler] (リソースマネージャースケジューラー): hadoopcluster:8030
- [Job History] (ジョブ履歴): hadoopcluster:10020
- [Staging directory] (ステージングディレクトリー): /user
-
[Authentication] (認証)の詳細を入力します。
例
- [User name] (ユーザー名): student
- オプション:
[Check services] (サービスを確認)をクリックします。
-
[Finish] (終了)をクリックします。
タスクの結果
[Repository] (リポジトリー)にHadoopクラスターのメタデータ定義が表示されます。