# tBigQueryOutputBulk

大きなサイズのデータ用に.txtまたは.csvファイルを作成して、Google BigQueryに転送する前に必要に応じて処理できるようにします。

コンポーネントtBigQueryOutputBulkとtBigQueryBulkExecは一般に、2ステッププロセスの一部として一緒に使います。最初のステップでは、出力ファイルが生成されます。2番目のステップでは、データセットをフィードするためにこのファイルを使います。これら2つのステップは、tBigQueryOutputコンポーネント内で融合しています。このコンポーネントについては別のセクションで詳しく説明しています。2つの別々のコンポーネントを使う利点は、データセットにロードする前にデータを変換できることです。

このコンポーネントは、指定されたデータを.txtまたは.csvファイルに書き込み、Google BigQueryに転送できるようにします。

## tBigQueryOutputBulkの標準プロパティ

これらのプロパティは、標準ジョブのフレームワークで実行されているtBigQueryOutputBulkを設定するために使われます。

標準のtBigQueryOutputBulkコンポーネントは、ビッグデータファミリーに属しています。

このフレームワーク内のコンポーネントは、すべてのTalend製品で利用できます。

## 基本設定

| [Properties] (プロパティ) | 説明 |
| --- | --- |
| [Schema] (スキーマ)と[Edit schema] (スキーマを編集) | スキーマとは行の説明のことです。処理して次のコンポーネントに渡すフィールド(カラム)数を定義します。Sparkジョブを作成する場合、フィールドの命名時は予約語のlineを避けます。<br><br><ul> <li> <p> <span>[Built-in] (組み込み)</span>: そのコンポーネントに対してのみスキーマを作成し、ローカルに保管します。</p> </li> <li> <p> <span>[Repository] (リポジトリー)</span>: スキーマは作成済みで、リポジトリーに保管されています。さまざまなプロジェクトやジョブデザインで再利用できます。</p> </li> </ul><br><br>スキーマを変更するには[Edit schema] (スキーマを編集)をクリックします。変更を加えると、スキーマは自動的に組み込みになります。<br><br><ul> <li> <p> <span>[View schema] (スキーマを表示)</span>: スキーマのみを表示する場合は、このオプションを選択します。</p> </li> <li> <p> <span>[Change to built-in property] (組み込みのプロパティに変更)</span>: ローカルで変更を行うためにスキーマを<span>組み込み</span>に変更する場合は、このオプションを選択します。</p> </li> <li> <p> <span>[Update repository connection] (リポジトリー接続をアップデート)</span>: リポジトリーに保存されているスキーマに変更を加え、変更後にそのコンテンツをすべてのジョブにプロパゲートするかどうかを決める場合は、このオプションを選択します。</p> <p>変更を現在のジョブにのみ反映する場合は、変更後、<span>[No] (いいえ)</span>を選択し、<span>[Repository Content] (リポジトリーコンテンツ)</span>ウィンドウで再びこのスキーマのメタデータを選択します。</p> </li> </ul> |
| [File name] (ファイル名) | 生成する必要のある*.txt*または*.csv*ファイルを参照するか、またはそのパスを入力します。 |
| [Append] (追加) | 既存のデータの末尾に新しいデータを書き込むには、このチェックボックスをオンにします。選択しない場合は、既存のデータが上書きされます。 |

## 詳細設定

| [Properties] (プロパティ) | 説明 |
| --- | --- |
| [Use a custom endpoint] (カスタムエンドポイントを使用) | デフォルトのエンドポイントの代わりにプライベートエンドポイントを使う場合は、このチェックボックスをオンにします。<br><br>選択後は、次のプロパティにURLを入力します。<br><br><ul> <li><span>Google Storage Private API URL</span> (形式は<span>https://storage.googleapis.com</span>)</li> <li><span>Google BigQuery Private API URL</span> (形式は<span>https://bigquery.googleapis.com</span>)</li> </ul><br><br>詳細は、Google Cloudのドキュメンテーションで[Access Google APIs through endpoints](https://cloud.google.com/vpc/docs/configure-private-service-connect-apis)をご覧ください。<br><br>このプロパティは、[Service account] (サービスアカウント)と[Application Default Credentials] (アプリケーションのデフォルト認証情報)を使って認証する場合のみ利用できます。 |
| [Field Separator] (フィールド区切り) | 転送されたデータのフィールドを区切る場合は、文字、文字列、正規表現のいずれかを入力します。 |
| [Use custom null marker] (カスタムnullマーカーを使用) | このオプションをオンにすると、特定の文字をnullマーカーとして使用できます。右側のテキスト枠内の二重引用符でnullマーカーを指定できます。<br><br>このオプションは、null値を持つフィールドによるエラーを防止します。 |
| [Create directory if not exists] (ディレクトリーがない場合はディレクトリーを作成) | このチェックボックスをオンにすると、Google Cloud Storageの[File] (ファイル)で定義されたディレクトリーが存在しない場合にディレクトリーが作成されます。 |
| フラッシュバッファーサイズのカスタマイズ | この行数を超えるとメモリが解放されます。 |
| [Check disk space] (ディスク容量の確認) | ディスクがいっぱいの場合、実行中に例外を返すには、このチェックボックスをオンにします。 |
| [Encoding] (エンコーディング) | リストからエンコーディングを選択するか、[CUSTOM] (カスタム)を選択して、手動で定義します。このフィールドはデータベースデータ処理の必須フィールドです。サポートされるエンコーディングは、使用しているJVMに応じて異なります。詳細は、[https://docs.oracle.com](https://docs.oracle.com/)をご覧ください。 |
| [tStatCatcher Statistics] (tStatCatcher統計) | このチェックボックスをオンにすると、コンポーネントレベルでログデータを収集できます。 |

## [Global Variables] (グローバル変数)

| 変数 | 説明 |
| --- | --- |
| グローバル変数 | NB\_LINE: 入力コンポーネントによって読み取られた行の数、または出力コンポーネントに転送された行の数。これはAfter変数で、整数を返します。<br><br>ERROR\_MESSAGE: エラーが発生した時にコンポーネントによって生成されるエラーメッセージ。これはAfter変数で、文字列を返します。この変数はコンポーネントにこのチェックボックスが存在し、[Die on error] (エラー発生時に強制終了)がオフになっている場合のみ機能します。<br><br>Flow変数はコンポーネントの実行中に機能し、After変数はコンポーネントの実行後に機能します。<br><br>フィールドまたは式に変数を入力する場合は、Ctrl + スペースを押して変数リストにアクセスし、使用する変数を選択します。<br><br>変数の詳細は、[コンテキストと変数を使用](https://help.qlik.com/talend/r/ja-JP/8.0/studio-user-guide/contexts-and-variables)をご覧ください。 |

## 使用方法

| 使用方法のガイダンス | 説明 |
| --- | --- |
| 使用ルール | 前のコンポーネントからのデータの提供を必要とする出力コンポーネントです。<br><br>このコンポーネントは、マルチリージョンロケーションとリージョナルロケーションの両方を自動的に検出し、サポートします。リージョナルロケーションを使用する時は、使用するバケットとデータセットは同じロケーションに入れておく必要があります。 |
| BigQueryデータ型の制限事項 | <ul> <li>BigQueryのレコードタイプはサポートされていません。</li> <li>DescriptionカラムやModeカラムなど、テーブルメタデータのカラムは取得できません。</li> <li>BigQueryシステムからのタイムスタンプデータは、文字列データにフォーマットされます。</li> <li>BigQueryの数値データはBigDecimalに変換されます。</li> </ul> |