tELTHiveInput
次のtELTHiveMapコンポーネントによって使われるスキーマを入力Hiveテーブルから複製します。
ELT Hiveの3つのコンポーネントは、オペレーション条件の点で密接に関連しています。これらのコンポーネントでHive DBスキーマを使用して、句を含むInsertステートメントを生成します。Insertステートメントは、定義済みのDB出力テーブル内で実行するものです。
このコンポーネントは、続くtELTHiveMapコンポーネントに、使用するHiveテーブルの入力スキーマを提供します。
デフォルトで、このコンポーネントはTalend Studioと共には出荷されていません。機能マネージャーを使ってインストールする必要があります。 詳細は、機能マネージャーを使って機能をインストールをご覧ください。
tELTHiveInputの標準プロパティ
これらのプロパティは、標準ジョブのフレームワークで実行されているtELTHiveInputを設定するために使われます。
標準のtELTHiveInputコンポーネントは、ELTファミリーに属しています。
このフレームワークのコンポーネントは、すべてのビッグデータ対応のTalend製品およびTalend Data Fabricで使用できます。
基本設定
[Schema] (スキーマ) |
スキーマとは行の説明のことで、処理して次のコンポーネントに渡すフィールドの数を定義します。スキーマは[Built-in] (組み込み)か、[Repository] (リポジトリー)にリモートで保存されます。 |
|
[Built-in] (組み込み): そのコンポーネントに対してのみスキーマを作成し、ローカルに保管します。 [Repository] (リポジトリー): スキーマは作成済みで、リポジトリーに保管されています。さまざまなプロジェクトやジョブデザインで再利用できます。 |
[Edit Schema] (スキーマを編集) |
スキーマを変更するには[Edit schema] (スキーマを編集)をクリックします。現在のスキーマがリポジトリータイプの場合は、3つのオプションを利用できます。
|
[Default table name] (デフォルトテーブル名) |
使う入力テーブルの名前を入力します。 |
[Default schema name] (デフォルトスキーマ名) |
使う入力テーブルが関連しているデータベーススキーマの名前を入力します。 |
詳細設定
[tStat Catcher Statistics] (tStatCatcher統計) |
このチェックボックスを選択すると、コンポーネントレベルでログデータを収集できます。 |
グローバル変数
グローバル変数 |
ERROR_MESSAGE: エラーが発生した時にコンポーネントによって生成されるエラーメッセージ。これはAfter変数で、文字列を返します。この変数はコンポーネントにこのチェックボックスが存在し、[Die on error] (エラー発生時に強制終了)がオフになっている場合のみ機能します。 Flow変数はのコンポーネントの実行中に機能し、After変数はコンポーネントの実行後に機能します。 フィールドまたは式に変数を入力する場合は、Ctrl + スペースを押して変数リストにアクセスし、使用する変数を選択します。 変数の詳細は、コンテキストと変数を使用をご覧ください。 |
使用方法
使用ルール |
tELTHiveMapは、tELTHiveInputおよびtELTHiveOutputと一緒に使用してください。これらのコンポーネントと共に使用する出力リンクは、テーブル名の構文と正確に対応している必要があります。 Hiveデータベースへの接続に使用しているTalend StudioがWindowsマシンにインストールされている場合は、Talend Studioがインストールされているディスクのルートにtmpというフォルダーを手動で作成する必要があります。 情報メモ注:
ELTコンポーネントは、実際のデータフローを処理せず、スキーマ情報しか処理しません。 |
Dataprocとの併用 |
ELT Hiveのコンポーネントでは、使用するGoogle Cloud DataprocクラスターにTezをインストールする必要があります。
|