Hortonworks Data PlatformでのHCatalogテーブルの管理
このシナリオは、ビッグデータ関連Talend製品にのみ適用されます。
Talendでサポートされているテクノロジーの詳細は、Talendコンポーネントをご覧ください。
このシナリオでは、Hortonworks Data Platform上でのHCatalogテーブル管理の一般的な操作を含む6コンポーネントジョブについて説明します。このシナリオのサブセクションでは、次のようなDB操作を扱います。
-
HDFSのデータベースへのテーブルの作成
-
HCatalog管理対象テーブルへのデータの書き込み
-
tHCatalogLoadを使った、パーティションテーブルへのデータの書き込み
-
HCatalog管理対象テーブルのデータの読み取り
-
HDFSのテーブルから読み取ったデータの出力
情報メモ注:
Hiveデータ定義言語とHCatalogデータ定義言語の知識が必要です。Hiveデータ定義言語の詳細は、https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL (英語のみ)をご覧ください。HCatalogデータ定義言語の詳細は、https://cwiki.apache.org/confluence/display/HCATALOG/Design+Document+-+Java+APIs+for+HCatalog+DDL+Commands (英語のみ)をご覧ください。