tApacheKuduOutputの標準プロパティ

[Property type] (プロパティタイプ)

[Built-in] (組み込み)と[Repository] (リポジトリー)のいずれかです。

[Built-In] (組み込み): 一元的に保存されるプロパティデータはありません。

[Repository] (リポジトリー): プロパティが保存されているリポジトリーファイルを選択します。

[Master addresses] (マスターアドレス)

このフィールドの下にあるプラスボタンをクリックしてマスターアドレスを追加および設定します。

• [Master node host name] (マスターノードホスト名): Apache Kuduクラスターマスターノードを識別するIPアドレスまたはホスト名を入力します。
• [Master node port] (マスターノードポート): Apache Kuduクラスターマスターノードと関連付けられているポートを入力します。

同じApache Kuduクラスターのマスターノードを複数追加する場合は、別々の行に追加してください。

[Table name] (テーブル名)

データの書き込み先となるApache Kuduテーブルの名前を入力します。また、このフィールドの横にある[...]ボタンをクリックすればApache Kuduテーブルの名前を選択できます。

[Schema] (スキーマ)と[Edit schema] (スキーマを編集)

スキーマとは行の説明のことです。処理して次のコンポーネントに渡すフィールド(カラム)数を定義します。Sparkジョブを作成する場合、フィールドの命名時は予約語のlineを避けます。

• [Built-in] (組み込み): そのコンポーネントに対してのみスキーマを作成し、ローカルに保管します。

• [Repository] (リポジトリー): スキーマは作成済みで、リポジトリーに保管されています。さまざまなプロジェクトやジョブデザインで再利用できます。

スキーマを変更するには[Edit schema] (スキーマを編集)をクリックします。現在のスキーマがリポジトリータイプの場合は、3つのオプションを利用できます。

• [View schema] (スキーマを表示): スキーマのみを表示する場合は、このオプションを選択します。

• [Change to built-in property] (組み込みのプロパティに変更): ローカルで変更を行うためにスキーマを組み込みに変更する場合は、このオプションを選択します。

• [Update repository connection] (リポジトリー接続をアップデート): リポジトリーに保存されているスキーマに変更を加え、変更後にそのコンテンツをすべてのジョブにプロパゲートするかどうかを決める場合は、このオプションを選択します。

  変更を現在のジョブにのみ反映する場合は、変更後、[No] (いいえ)を選択し、[Repository Content] (リポジトリーコンテンツ)ウィンドウで再びこのスキーマのメタデータを選択します。

[Write operation] (書き込み操作)

実行する書き込み操作を指定します。現在、このコンポーネントは Apache Kuduテーブルにのみデータを挿入します。

[Create if not exist] (存在しない場合は作成)

このオプションを選択すると、[Table name] (テーブル名)フィールドで指定されたテーブルが存在しない場合にテーブルが作成されます。

[tStatCatcher Statistics] (tStatCatcher統計)

このチェックボックスをオンにすると、ジョブレベルおよび各コンポーネントレベルでジョブ処理メタデータが収集されます。

[Max batch size] (最大バッチサイズ)

バッチで処理できる最大行数を指定します。

[Set primary key(s)] (プライマリキーを設定)

このオプションを選択すると、プライマリキーを手動で追加できます。このオプションが選択されない場合は、最初のフィールドがプライマリキーとして使われます。

新しいテーブルを作成している場合、そのテーブルの作成後は定義したプライマリキーを変更できなくなります。

[Generate default partitioning] (デフォルトパーティショニングを生成)

このオプションを選択すると、データの挿入時にデフォルトのパーティションが生成されます。

このオプションは、[Basic settings] (基本設定)ビューで[Create if not exist] (存在しない場合は作成)ビューが選択された場合に利用できます。

[Hash partitioning columns] (パーティショニングカラムをハッシュ)

このフィールドの下にあるプラスボタンをクリックすると、どの行がハッシュパーティショニングされているかを基準にカラムが追加されます。指定されるカラムは、データ内に存在し、スキーマで定義されている必要があります。

デフォルトでは、新しく作成されたテーブルはパーティショニングされています。新しく作成されたテーブルのパーティショニング方法を定義することをお勧めします。関連情報はHash partitioningをご覧ください。

このフィールドは、[Basic settings] (基本設定)ビューで[Create if not exist] (存在しない場合は作成)ビューが選択され、[Generate default partitioning] (デフォルトパーティショニングを生成)が選択されていない場合に利用できます。

[Bucket number] (バケット番号)

パーティションの格納に使うバケットの番号を入力します。バケットはオンザフライで作成されます。

ランタイムでは、[Hash partitioning columns] (パーティショニングカラムをハッシュ)フィールドで指定されたハッシュ値によって行がこれらのバケットのいずれかに分散されます。この [Hash partitioning columns] (パーティショニングカラムをハッシュ)テーブルを空のままにすると、テーブルの作成中にはハッシュパーティショニングが適用されません。

このフィールドは、[Basic settings] (基本設定)ビューで[Create if not exist] (存在しない場合は作成)ビューが選択された場合に利用できます。

関連情報はHash partitioningをご覧ください。

グローバル変数

NB_LINE: 入力コンポーネントによって読み取られた行の数、または出力コンポーネントに転送された行の数。これはAfter変数で、整数を返します。

ERROR_MESSAGE: エラーが発生した時にコンポーネントによって生成されるエラーメッセージ。これはAfter変数で、文字列を返します。この変数はコンポーネントにこのチェックボックスが存在し、[Die on error] (エラー発生時に強制終了)がオフになっている場合のみ機能します。

Flow変数はのコンポーネントの実行中に機能し、After変数はコンポーネントの実行後に機能します。

フィールドまたは式に変数を入力する場合は、Ctrl + スペースを押して変数リストにアクセスし、使用する変数を選択します。

変数の詳細は、コンテキストと変数を使用をご覧ください。

使用ルール

このコンポーネントは、終了コンポーネントとして使用され、入力リンクを必要とします。