Accéder au contenu principal Passer au contenu complémentaire

Propriétés du tIcebergOutput pour Apache Spark Batch

Ces propriétés sont utilisées pour configurer le tIcebergOutput s'exécutant dans le framework de Jobs Spark Batch.

Le composant tIcebergOutput Spark Batch appartient à la famille Big Data.

Le composant de ce framework est disponible dans tous les produits Talend.

Ce composant est disponible uniquement lorsque vous avez installé la version mensuelle 8.0.1-R2024-04 du Studio ou une plus récente fournie par Talend. Pour plus d'informations, contactez votre administrateur ou administratrice.

Basic settings

Propriétés Description
Catalog et Schema Pour récupérer un jeu de données depuis Unity Catalog, spécifiez les paramètres suivants :
  • Catalog : saisissez le nom du catalogue à utiliser.
  • Schema : saisissez le nom du schéma à utiliser.

Ces champs sont disponibles uniquement lorsque vous sélectionnez l'option Enable Unity Catalog avec Databricks dans l'onglet Spark Configuration de votre Job Spark Batch.

Table Saisissez le nom de la table dans laquelle vous souhaitez écrire les données.
Action on table Sélectionnez dans la liste déroulante l'action à effectuer sur la table :
  • Append to
  • Créer
  • Create or replace
  • Overwrite partitions

    Cette action est disponible lorsque vous sélectionnez l'option Enable Unity Catalog avec Databricks dans l'onglet Spark Configuration de votre Job Spark Batch.

  • Replace
Set format Cochez cette case afin de spécifier le format de fichier et sélectionnez les informations de format dans les listes déroulantes Format version et File format.

Ce paramètre est disponible uniquement lorsque vous sélectionnez Create, Create or replace ou Replace dans la liste déroulante Action on table.

Ce paramètre est disponible lorsque vous sélectionnez l'option Enable Unity Catalog avec Databricks dans l'onglet Spark Configuration de votre Job Spark Batch.

Set location Cochez cette case pour spécifier un emplacement où sauvegarder la table à créer.

Ce paramètre est disponible uniquement lorsque vous sélectionnez Create, Create or replace ou Replace dans la liste déroulante Action on table.

Set partitions Cochez cette case pour créer des partitions dans la table et spécifiez le nom des colonnes dans la table Partition key qui s'affiche.

Ce paramètre est disponible uniquement lorsque vous sélectionnez Create, Create or replace ou Replace dans la liste déroulante Action on table.

Table properties Saisissez les propriétés supplémentaires de configuration, en suivant le format de la clé et des valeurs, en cliquant sur le bouton [+] pour chaque propriété à ajouter. Par exemple, vous pouvez ajouter des propriétés comme format-version. Pour plus d'informations concernant les propriétés de configuration disponibles, consultez Configuration dans la documentation d'Apache Iceberg (en anglais).

Ce paramètre est disponible uniquement lorsque vous sélectionnez Create, Create or replace ou Replace dans la liste déroulante Action on table.

Variables globales

Variables Description

ERROR_MESSAGE

Message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères.

Utilisation

Conseils d'utilisation Description
Règle d'utilisation Ce composant est généralement utilisé avec d'autres composants Iceberg.

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.