tCassandraOutputBulkの標準プロパティ
これらのプロパティは、標準ジョブのフレームワークで実行されているtCassandraOutputBulkを設定するために使われます。
標準のtCassandraOutputBulkコンポーネントは、ビッグデータファミリーとデータベースNoSQLファミリーに属しています。
このフレームワーク内のコンポーネントは、ビッグデータ対応のTalend 製品すべて、およびTalend Data Fabricで利用できます。
基本設定
|
[Property type] (プロパティタイプ) |
[Built-in] (組み込み)と[Repository] (リポジトリー)のいずれかです。 [Built-In] (組み込み): 一元的に保存されるプロパティデータはありません。 [Repository] (リポジトリー): プロパティが保存されているリポジトリーファイルを選択します。 |
|
[Schema] (スキーマ)と[Edit schema] (スキーマを編集) |
スキーマとは行の説明のことです。処理して次のコンポーネントに渡すフィールド(カラム)数を定義します。Sparkジョブを作成する場合、フィールドの命名時は予約語のlineを避けます。 スキーマを変更するには[Edit schema] (スキーマを編集)をクリックします。現在のスキーマがリポジトリータイプの場合は、3つのオプションを利用できます。
|
|
|
[Built-in] (組み込み): そのコンポーネントに対してのみスキーマを作成し、ローカルに保管します。 |
|
|
[Repository] (リポジトリー): スキーマは作成済みで、リポジトリーに保管されています。さまざまなプロジェクトやジョブデザインで再利用できます。 再使用するスキーマに整数またはファンクションのデフォルト値が指定されている場合は、これらのデフォルト値を引用符で囲まないようにご注意ください。引用符で囲まれている場合は手動で削除します。 詳細は、Talend Studioユーザーガイドでテーブルスキーマに関連する説明をご覧ください。 |
|
[Table type] (テーブルタイプ) |
作成するテーブルに使用するデータモデルタイプを選択します。CQL (実際には CQL3)またはnon-CQL(CQL3以前のCassandraのレガシースリフトベースのAPI)にできます。 このドロップダウンリストは、使用している[DB version] (データベースバージョン)がCassandra 2.0.0(非推奨)の場合のみ利用できます。Cassandra 2.0.0以降のバージョンでは、CQLがこのコンポーネントで利用できる唯一のモデルとなるため、このリストは利用できなくなります。 |
|
[DB Version] (DBバージョン) |
使用するCassandraバージョンを選択します。 |
|
[Keyspace] |
SSTableの書き込み先にキースペースの名前を入力します。 |
|
[Column family] (カラムファミリー) |
SSTableの書き込み先にカラムファミリーの名前を入力します。 |
|
[Partitioner] (パーティショナー) |
Cassandraクラスター全体でのデータの分散方法を決定するパーティショナーを選択します。
パーティショナーの詳細は、http://wiki.apache.org/cassandra/Partitioners (英語のみ)をご覧ください。 |
|
[Schema statement] (スキーマステートメント) |
使用するカラムファミリーのスキーマを定義し、オンザフライで作成するステートメントを入力します。
このスキーマステートメントの例は、[Schema statement] (スキーマステートメント)フィールドに提供されています:
create table ks.tb (id int, name text, birthday timestamp, primary key(id, birthday)) with clustering order by (birthday desc)id、name、birthdayというカラムを含むtbというカラムファミリーがksキースペースの下に作成されます。 カラムファミリーの詳細は、標準カラムファミリー (英語のみ)をご覧ください。 このフィールドは、Cassandraデータベースのバージョンが2.0.0以降の場合のみ利用できます。2.0.0(非推奨)の場合は、 [Table type] (テーブルタイプ)ドロップダウンリストでCQLが選択されている場合のみ利用できます。 |
|
[Insert statement] (ステートメントを挿入) |
入力フローから使用するカラムファミリーのカラムにデータを書き込む方法を指示するステートメントを入力します。 このステートメントは、サーバーに送信する前の、このコンポーネントで定義した[SSTable directory] (SSTableディレクトリー)にクエリー結果をローカルで保管するCassandraプリペアドステートメントです。プリペアドステートメントの詳細は、プリペアドステートメントをご覧ください。 この挿入ステートメントの例は、[Insert statement] (挿入ステートメント)フィールドで提供されています:
このフィールドは、Cassandraデータベースのバージョンが2.0.0以降の場合のみ利用できます。2.0.0(非推奨)の場合は、 [Table type] (テーブルタイプ)ドロップダウンリストでCQLが選択されている場合のみ利用できます。 |
|
[Column name comparator] (カラム名比較演算子) |
カラムのソートに使うカラム名のデータ型を選択します。使うデータモデルがCQL3の場合、このリストは使えません。 比較演算子の詳細は、http://www.datastax.com/docs/1.1/ddl/column_family#about-data-types-comparators-and-validatorsを参照してください。 |
|
[SSTable directory] (SSTableディレクトリー) |
SSTableのローカルディレクトリーを指定します。SSTableへの完全パスは、指定されたキースペース名とカラムファミリー名が追加されたローカルディレクトリーになります。 たとえば、ローカルディレクトリーを/home/talend/sstable、キースペース名としてtestk、カラムファミリー名としてtestcを指定すると、SSTableへの完全パスは/home/talend/sstable/testk/testc/となります。 |
|
[Buffer size] (バッファーサイズ) |
Cassandraに書き込まれる前にSSTableが到達する必要があるサイズを指定します。 |
詳細設定
|
[tStatCatcher Statistics] (tStatCatcher統計) |
このチェックボックスを選択すると、ジョブレベルおよび各コンポーネントレベルでジョブ処理メタデータが収集されます。 |
グローバル変数
|
グローバル変数 |
ERROR_MESSAGE: エラーが発生した時にコンポーネントによって生成されるエラーメッセージ。これはAfter変数で、文字列を返します。この変数はコンポーネントにこのチェックボックスが存在し、[Die on error] (エラー発生時に強制終了)がオフになっている場合のみ機能します。 Flow変数はのコンポーネントの実行中に機能し、After変数はコンポーネントの実行後に機能します。 フィールドまたは式に変数を入れるには、Ctrl + スペースを押して変数リストにアクセスし、リストから使用する変数を選択します。 変数の詳細は、Talend Studioユーザーガイドをご覧ください。 |
使用方法
|
使用ルール |
このコンポーネントは、常に受信リンクを必要とします。 |