メイン コンテンツをスキップする

Big Data

機能 説明 対象製品
Spark Batchジョブで新しいIcebergコンポーネントをサポート Talend Studioの Spark BatchジョブでIcebergコンポーネントを利用できるようになりました。[Palette] (パレット)[Databases] (データベース)ファミリーから以下のコンポーネントを利用できます。
  • tIcebergCatalog: カタログを設定できます。
  • tIcebergInput: SELECT * SQL操作を実行することで、Icebergテーブルからデータを読み取ることができます。
  • tIcebergOutput: データフレームを使ってテーブルに書き込むことができます。

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

Availability-noteBeta
CDP Public Cloud Data Hub 7.2.17とSpark Universal 3.3.xをサポート
Spark 3.3.xと共にSpark Universalを使って、CDP Public Cloud Data HubでSpark Batchジョブを実行できるようになりました。Sparkジョブの[Spark configuration] (Spark設定)ビューまたは[Hadoop Cluster Connection] (Hadoopクラスター接続)メタデータウィザードのどちらかで設定できます。

このモードを選択すると、Talend StudioはCDP Public Cloud Data Hub 7.2.17バージョンと互換性を持つようになります。

この機能のベータ版では、[Hadoop Cluster Connection] (Hadoopクラスター接続)メタデータウィザードでは[Check services] (サービスを確認)オプションを使用できません。

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

Spark StreamingジョブでSpark Universalを伴うKafkaをサポート Talend StudioのSpark Streamingジョブで、以下のKafkaバージョンがサポートされました:
  • Spark Universal 3.3xを伴うKafka 3.3.1
  • Spark Universal 3.4.xを伴うKafka 3.4.0

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

このページは役に立ちましたか?

このページまたはコンテンツにタイポ、ステップの省略、技術的エラーなどの問題が見つかった場合はお知らせください。