メイン コンテンツをスキップする 補完的コンテンツへスキップ

tCassandraOutputBulkの標準プロパティ

これらのプロパティは、標準ジョブのフレームワークで実行されているtCassandraOutputBulkを設定するために使われます。

標準tCassandraOutputBulkコンポーネントは、ビッグデータファミリーとデータベースNoSQLファミリーに属しています。

このフレームワーク内のコンポーネントは、ビッグデータ対応のTalend 製品すべて、およびTalend Data Fabricで利用できます。

基本設定

[Property type] (プロパティタイプ)

[Built-in] (組み込み)[Repository] (リポジトリー)のいずれかです。

[Built-In] (組み込み): 一元的に保存されるプロパティデータはありません。

[Repository] (リポジトリー): プロパティが保存されているリポジトリーファイルを選択します。

[Schema] (スキーマ)[Edit schema] (スキーマを編集)

スキーマとは行の説明のことです。処理して次のコンポーネントに渡すフィールド(カラム)数を定義します。Sparkジョブを作成する場合、フィールドの命名時は予約語のlineを避けます。

スキーマを変更するには[Edit schema] (スキーマを編集)をクリックします。現在のスキーマがリポジトリータイプの場合は、3つのオプションを利用できます。

  • [View schema] (スキーマを表示): スキーマのみを表示する場合は、このオプションを選択します。

  • [Change to built-in property] (組み込みのプロパティに変更): ローカルで変更を行うためにスキーマを組み込みに変更する場合は、このオプションを選択します。

  • [Update repository connection] (リポジトリー接続をアップデート): リポジトリーに保存されているスキーマに変更を加え、変更後にそのコンテンツをすべてのジョブにプロパゲートするかどうかを決める場合は、このオプションを選択します。変更を現在のジョブにのみ反映する場合は、変更後、[No] (いいえ)を選択し、[Repository Content] (リポジトリーコンテンツ)ウィンドウで再びこのスキーマのメタデータを選択します。

 

[Built-in] (組み込み): そのコンポーネントに対してのみスキーマを作成し、ローカルに保管します。

 

[Repository] (リポジトリー): スキーマは作成済みで、リポジトリーに保管されています。さまざまなプロジェクトやジョブデザインで再利用できます。

再使用するスキーマに整数またはファンクションのデフォルト値が指定されている場合は、これらのデフォルト値を引用符で囲まないようにご注意ください。引用符で囲まれている場合は手動で削除します。

詳細は、Talend Studioユーザーガイドでテーブルスキーマに関連する説明をご覧ください。

[Table type] (テーブルタイプ)

作成するテーブルに使用するデータモデルタイプを選択します。CQL (実際には CQL3)またはnon-CQL(CQL3以前のCassandraのレガシースリフトベースのAPI)にできます。

このドロップダウンリストは、使用している[DB version] (データベースバージョン)がCassandra 2.0.0(非推奨)の場合のみ利用できます。Cassandra 2.0.0以降のバージョンでは、CQLがこのコンポーネントで利用できる唯一のモデルとなるため、このリストは利用できなくなります。

[DB Version] (DBバージョン)

使用するCassandraバージョンを選択します。

[Keyspace]

SSTableの書き込み先にキースペースの名前を入力します。

[Column family] (カラムファミリー)

SSTableの書き込み先にカラムファミリーの名前を入力します。

[Partitioner] (パーティショナー)

Cassandraクラスター全体でのデータの分散方法を決定するパーティショナーを選択します。

  • ランダム

  • Murmur3

  • [Order preserving] (オーダー保存): キーがUTF8文字列であると想定されているため、推奨されません。

パーティショナーの詳細は、http://wiki.apache.org/cassandra/Partitioners (英語のみ)をご覧ください。

[Schema statement] (スキーマステートメント)

使用するカラムファミリーのスキーマを定義し、オンザフライで作成するステートメントを入力します。

  • このステートメントは、サーバーに送信する前の、このコンポーネントで定義した[SSTable directory] (SSTableディレクトリー)にクエリー結果をローカルで保管するCassandraプリペアドステートメントです。プリペアドステートメントの詳細は、プリペアドステートメントをご覧ください。

  • Cassandraカラムファミリーは、同種のレコードの行のコレクションのコンテナーになります。そのスキーマには、定義したコンポーネントスキーマと厳密に同じカラムが含まれている必要があります。つまり、両方のスキーマのカラム名とカラムの順序を同一にする必要があります。

このスキーマステートメントの例は、[Schema statement] (スキーマステートメント)フィールドに提供されています:
create table ks.tb (id int, name text, birthday timestamp, primary key(id, birthday)) with clustering order by (birthday desc)
idnamebirthdayというカラムを含むtbというカラムファミリーがksキースペースの下に作成されます。

カラムファミリーの詳細は、標準カラムファミリー (英語のみ)をご覧ください。

このフィールドは、Cassandraデータベースのバージョンが2.0.0以降の場合のみ利用できます。2.0.0(非推奨)の場合は、 [Table type] (テーブルタイプ)ドロップダウンリストでCQLが選択されている場合のみ利用できます。

[Insert statement] (ステートメントを挿入)

入力フローから使用するカラムファミリーのカラムにデータを書き込む方法を指示するステートメントを入力します。

このステートメントは、サーバーに送信する前の、このコンポーネントで定義した[SSTable directory] (SSTableディレクトリー)にクエリー結果をローカルで保管するCassandraプリペアドステートメントです。プリペアドステートメントの詳細は、プリペアドステートメントをご覧ください。

この挿入ステートメントの例は、[Insert statement] (挿入ステートメント)フィールドで提供されています:
insert into ks.tb (id, name, birthday) values (?, ?, ?)
ksキースペースのtbと呼ばれるカラムファミリーで、idnamebirthdayというカラムのデータがそれぞれ書き込まれます。ステートメント内の疑問符は、3列のカラムのバインド変数マーカーになります。バインド変数とその使用方法は、バインドされたパラメーターをご覧ください。

このフィールドは、Cassandraデータベースのバージョンが2.0.0以降の場合のみ利用できます。2.0.0(非推奨)の場合は、 [Table type] (テーブルタイプ)ドロップダウンリストでCQLが選択されている場合のみ利用できます。

[Column name comparator] (カラム名比較演算子)

カラムのソートに使うカラム名のデータ型を選択します。使うデータモデルがCQL3の場合、このリストは使えません。

比較演算子の詳細は、http://www.datastax.com/docs/1.1/ddl/column_family#about-data-types-comparators-and-validatorsを参照してください。

[SSTable directory] (SSTableディレクトリー)

SSTableのローカルディレクトリーを指定します。SSTableへの完全パスは、指定されたキースペース名とカラムファミリー名が追加されたローカルディレクトリーになります。

たとえば、ローカルディレクトリーを/home/talend/sstable、キースペース名としてtestk、カラムファミリー名としてtestcを指定すると、SSTableへの完全パスは/home/talend/sstable/testk/testc/となります。

[Buffer size] (バッファーサイズ)

Cassandraに書き込まれる前にSSTableが到達する必要があるサイズを指定します。

詳細設定

[tStatCatcher Statistics] (tStatCatcher統計)

このチェックボックスを選択すると、ジョブレベルおよび各コンポーネントレベルでジョブ処理メタデータが収集されます。

グローバル変数

グローバル変数

ERROR_MESSAGE: エラーが発生した時にコンポーネントによって生成されるエラーメッセージ。これはAfter変数で、文字列を返します。この変数はコンポーネントにこのチェックボックスが存在し、[Die on error] (エラー発生時に強制終了)がオフになっている場合のみ機能します。

Flow変数はのコンポーネントの実行中に機能し、After変数はコンポーネントの実行後に機能します。

フィールドまたは式に変数を入れるには、Ctrl + スペースを押して変数リストにアクセスし、リストから使用する変数を選択します。

変数の詳細は、Talend Studioユーザーガイドをご覧ください。

使用方法

使用ルール

このコンポーネントは、常に受信リンクを必要とします。

このページは役に立ちましたか?

このページまたはコンテンツにタイポ、ステップの省略、技術的エラーなどの問題が見つかった場合はお知らせください。