tCassandraOutputの標準プロパティ
これらのプロパティは、標準ジョブのフレームワークで実行されているtCassandraOutputを設定するために使われます。
標準のtCassandraOutputコンポーネントは、ビッグデータファミリーとデータベースNoSQLファミリーに属しています。
このフレームワークのコンポーネントは、すべてのビッグデータ対応のTalend製品およびTalend Data Fabricで使用できます。
基本設定
[Property type] (プロパティタイプ) |
[Built-in] (組み込み)と[Repository] (リポジトリー)のいずれかです。 [Built-In] (組み込み): 一元的に保存されるプロパティデータはありません。 [Repository] (リポジトリー): プロパティが保存されているリポジトリーファイルを選択します。 |
[Use existing connection] (既存の接続を使用) |
定義済みの接続の詳細を再利用する場合は、このチェックボックスを選択して、[Component List] (コンポーネントリスト)ドロップダウンリストから、目的の接続コンポーネントを選択します。 |
[DB Version] (DBバージョン) |
使用するCassandraバージョンを選択します。 |
[Host] (ホスト) |
Cassandraサーバーのホスト名またはIPアドレスを入力します。 |
[Port] (ポート) |
Cassandraサーバーのリスニングポート番号を入力します。 |
[Datacenter] (データセンター) |
Cassandraデータセンターの名前を入力します。 |
[Required authentication] (必要な認証) |
このチェックボックスをオンにすると、Cassandra認証の認証情報が提供されます。 このチェックボックスは、[Use existing connection] (既存の接続を使用)チェックボックスをオンにしない場合にのみ表示されます。 |
[Username] (ユーザー名) |
このフィールドにCassandra認証のユーザー名を入力します。 このフィールドは、[Required authentication] (必要な認証)チェックボックスがオンになっている場合のみ利用できます。 |
[Password] (パスワード) |
このフィールドにCassandra認証のパスワードを入力します。 パスワードを入力するためには、パスワードフィールドの横にある[...]ボタンをクリックし、ポップアップダイアログボックスにパスワードを二重引用符で囲んで入力して[OK]をクリックし、設定を保存します。 このフィールドは、[Required authentication] (必要な認証)チェックボックスがオンになっている場合のみ利用できます。 |
[Use SSL] (SSLを使用) |
SSLまたはTLS暗号化接続を有効にする場合は、このチェックボックスを選択します。 次に、同じジョブ内のtSetKeyStoreコンポーネントを使用して暗号化情報を指定する必要があります。 |
[Keyspace] |
データの書き込み先にキースペースの名前を入力します。 |
[Action on keyspace] (キースペースのアクション) |
使用するキースペースで実行する操作を選択します:
|
[Column family] (カラムファミリー) |
データの書き込み先にキースペースの名前を入力します。 |
[Action on column family] (カラムファミリーのアクション) |
使用するカラムファミリーで実行する操作を選択します:
このフィールドは、[Action on data] (データでのアクション)ドロップダウンリストで[Insert] (挿入)または[Update] (アップデート)が選択されている場合のみ利用できます。 |
[Action on data] (データでのアクション) |
定義されたテーブルのデータで実行できる操作は次のとおりです。
詳細な操作は、[Advanced settings] (詳細設定)ビューを使用します。 |
[Schema] (スキーマ)と[Edit schema] (スキーマを編集) |
スキーマとは行の説明のことです。処理して次のコンポーネントに渡すフィールド(カラム)数を定義します。Sparkジョブを作成する場合、フィールドの命名時は予約語のlineを避けます。 スキーマを変更するには[Edit schema] (スキーマを編集)をクリックします。現在のスキーマがリポジトリータイプの場合は、3つのオプションを利用できます。
|
|
[Built-in] (組み込み): そのコンポーネントに対してのみスキーマを作成し、ローカルに保管します。 |
|
[Repository] (リポジトリー): スキーマは作成済みで、リポジトリーに保管されています。さまざまなプロジェクトやジョブデザインで再利用できます。 再利用するスキーマに整数またはファンクションのデフォルト値が指定されている場合は、これらのデフォルト値を引用符で囲まないようにご注意ください。引用符で囲まれている場合は手動で削除します。 詳細は、テーブルスキーマを取得をご覧ください。 |
詳細設定
[Batch Size] (バッチサイズ) |
各処理バッチの行数。 Datastax APIを使っている場合、この機能は[Use unlogged batch] (UNLOGGEDバッチを使用)チェックボックスをオンにした場合にのみ表示されます。 |
[Use unlogged batch] (UNLOGGEDバッチを使用) |
このチェックボックスを選択すると、データをバッチ処理できますが、CassandraのUNLOGGEDアプローチが使用されます。このフィーチャーは[Insert] (挿入)、[Update] (アップデート)および[Delete] (削除)の3つの操作で利用できます。 次に、バッチモードの動作を設定する必要があります:
Cassandraでバッチを使用する理想的な状況には、少数のテーブルで挿入またはアップデートするデータを同期する場合などが挙げられます。 このUNLOGGEDアプローチでは、ジョブは、Cassandraのバッチログシステムにバッチを書き込まないため、この書き込みによって発生するパフォーマンスの問題を回避します。CassandraのBATCHステートメントおよびUNLOGGEDアプローチの詳細は、バッチをご覧ください。 |
[Insert if not exists] (存在しない場合は挿入) |
このチェックボックスを選択すると、行が挿入されます。この行の挿入は、ターゲットテーブルに存在しない場合のみ行われます。 このフィーチャーは[Insert] (挿入)操作でのみ利用できます。 |
[Delete if exists] (存在する場合は削除) |
このチェックボックスを選択すると、受信フロー内の同じレコードを持つ行のみがターゲットテーブルから削除されます。 このフィーチャーは[Delete] (削除)操作でのみ利用できます。 |
[Use TTL] (TTLを使用) |
このチェックボックスを選択すると、ターゲットテーブルにTTLデータが書き込まれます。表示されるカラムリストで、TTLカラムとして使用されるカラムを選択する必要があります。このカラムのデータベース型はIntにする必要があります。 このフィーチャーは[Insert] (挿入)操作および[Update] (アップデート)操作でのみ利用できます。 |
[Use Timestamp] (タイムスタンプを使用) |
このチェックボックスを選択すると、ターゲットテーブルにタイムスタンプデータが書き込まれます。表示されるカラムリストで、タイムスタンプデータの保管に使用するカラムを選択する必要があります。このカラムのDBタイプは[BigInt]にする必要があります。 このフィーチャーは、[Insert] (挿入)、[Update] (アップデート)および[Delete] (削除)のアクションで利用可能です。 |
[IF condition] (IF条件) |
[Update] (アップデート)または[Delate] (削除)操作を実行するために満たす条件を追加します。この条件を使用すると、アップデートまたは削除するカラムについて正確な操作が可能になります。 |
[Special assignment operation] (特別な割り当て操作) |
このテーブルを完成して、[Update] (アップデート)操作をより具体的にするためのCassandraの高度なSETコマンドを構成します。たとえば、指定されたカラムの先頭または特定の位置にレコードを追加します。 このテーブルの[Update column] (カラムのアップデート)カラムで、アップデートされたカラムを選択し、[Operation] (操作)カラムから使用する操作を選択する必要があります。以下の操作を実行できます:
|
[Row key in the List type] (リストタイプの行キー) |
CassandraのWHERE句を構成するために使用するカラムを選択し、[Update] (アップデート)または[Delete] (削除)操作を実行します。このテーブルで使用されるカラムは、Cassandraテーブルのプライマリキーカラムのセットから選ぶ必要があります。 |
[Delete collection column based on position/key] (位置/キーに基づいてコレクションカラムを削除) |
削除する特定の行を参照する際に使用するカラムを選択します。 このフィーチャーは[Delete] (削除)操作でのみ利用できます。 |
[tStatCatcher Statistics] (tStatCatcher統計) |
このチェックボックスを選択すると、ジョブレベルおよび各コンポーネントレベルでジョブ処理メタデータが収集されます。 |
グローバル変数
グローバル変数 |
NB_LINE: 入力コンポーネントによって読み取られた行の数、または出力コンポーネントに転送された行の数。これはAfter変数で、整数を返します。 ERROR_MESSAGE: エラーが発生した時にコンポーネントによって生成されるエラーメッセージ。これはAfter変数で、文字列を返します。この変数はコンポーネントにこのチェックボックスが存在し、[Die on error] (エラー発生時に強制終了)がオフになっている場合のみ機能します。 Flow変数はのコンポーネントの実行中に機能し、After変数はコンポーネントの実行後に機能します。 フィールドまたは式に変数を入力する場合は、Ctrl + スペースを押して変数リストにアクセスし、使用する変数を選択します。 変数の詳細は、コンテキストと変数を使用をご覧ください。 |
使用方法
使用ルール |
このコンポーネントは、出力コンポーネントとして使用され、常に着信リンクが必要です。 |