入力レコードのソート

このリンクの終端では、Talend Studioにより実行結果をグルーピングして次のコンポーネントに出力する収集ステップが実行されます。

tSortRowの設定

Procedure

tSortRowをダブルクリックして、[Component] (コンポーネント)ビューを開きます。
[Criteria] (条件)テーブルの下にあるボタンを3回クリックし、テーブルに3行追加します。
[Schema column] (スキーマカラム)で、ソート基準として使用するスキーマカラムを各行ごとに選択します。この例では、[ZipCode] (郵便番号)、[City] (市)、および[Address] (住所)を順に選択します。
Sort num or alpha?カラムで、3行すべてでalphaを選択します。
[Order asc or desc] (昇順または降順)カラムで、3行すべてについて[asc] (昇順)を選択します。
スキーマが表示されない場合は、[Sync columns] (カラムを同期)ボタンをクリックして、先行コンポーネントからスキーマを取得します。
[Advanced settings] (詳細設定)をクリックして、ビューを開きます。
[Sort on disk] (ディスクでソート)を選択します。次に[Temp data directory path] (一時データディレクトリーパス)フィールドおよび[Create temp data directory if not exist] (存在しない場合一時データディレクトリーを作成)チェックボックスが表示されます。
[Temp data directory path] (一時データディレクトリーパス)に、tSortRowで処理された一時データを格納するために使用するフォルダーのパスを入力するか、フォルダーを参照します。このアプローチを使うと、tSortRowが有効になり、より大量のデータをソートできます。
これらのスレッドを同じディレクトリーに書き出すと、互いに上書きしてしまうため、スレッドごとにフォルダーを作成してから、スレッドIDを使って処理する必要があります。

スレッドIDを表す変数を使用するには、[Code] (コード)をクリックしてそのビューを開き、ビューの中でthread_idの変数を探す必要があります。この例では、この変数はtCollector_1_THREAD_IDとなります。

次にこの変数を使ってパスを入力する必要があります。次のようになります。

"E:/Studio/workspace/temp"+((Integer)globalMap.get("tCollector_1_THREAD_ID"))。
[Create temp data directory if not exist] (存在しなければ一時データディレクトリーを作成)チェックボックスがオンになっていることを確認します。

デパーテーション化ステップの設定

Procedure

デパーテーション化ステップを表すリンクをクリックして、[Component] (コンポーネント)ビューを開き、[Parallelization] (並列化)タブをクリックします。

[Partition row] (パーテーション行)オプションは、[Type] (タイプ)エリアで自動的に選択されています。[None] (なし)オプションを選択すると、このリンクで処理するデータフローの並列化が無効になります。設定するリンクによっては、[Repartition row] (パーテーション行)オプションが[Type] (タイプ)エリアで利用可能となり、既に分割解除されているデータフローを再パーティショニングできます。

この[Parallelization] (並列化)ビューでは、次のプロパティを定義する必要があります。
- [Buffer Size] (バッファーサイズ): メモリを解放する前に処理する行数。
- [Merge sort partitions] (分割のマージ/ソート): これによりマージ/ソートアルゴリズムを実装してデータの一貫性を確保できます。
必要であれば、メモリ容量に合わせて[Buffer Size] (バッファーサイズ)フィールドの値を変更します。この例では、デフォルトのままにしておきます。

このページは役に立ちましたか?

このページまたはコンテンツにタイポ、ステップの省略、技術的エラーなどの問題が見つかった場合はお知らせください。

こちらにフィードバックをお寄せください