Nouvelles fonctionnalités

Fonctionnalités partagées

Fonctionnalité	Description
Support de davantage de composants pour le lignage des Jobs dans Qlik Cloud	Le Studio Talend peut à présent générer des jeux de données et des lignages vers Qlik Cloud pour le composant tSplitRow.
Support de nouveaux modes d'authentification dans les métadonnées Google BigQuery	L'assistant de métadonnées BigQuery supporte à présent deux modes d'authentification supplémentaires : Workload Identity Federation (Fédération d'identité de Workload), Application Default Credentials (Identifiants par défaut pour l'application), OAuth2 - Authorization Code grant (Attribution du code d'autorisation), OAuth Access Token (Jeton d'accès OAuth) et Service account (Compte de service).
Support du test de lignage local avant déploiement vers Qlik Cloud	Vous pouvez à présent tester la génération du lignage en local avant de publier vos Jobs vers Talend Management Console. Un nouveau bouton Lineage Testing (Test du lignage) dans la vue Run (Exécution) vous permet d'activer le test du lignage pour les Jobs supportant le lignage lors de l'exécution. Lorsque cette fonctionnalité est activée, le système configure automatiquement le niveau de log à INFO et génère les données de lignage au format JSON dans un dossier spécifié, ce qui vous permet d'identifier les problèmes de lignage et de les résoudre avant déploiement vers Qlik Cloud. Pour plus d'informations, consultez Tester le lignage en local.

Big Data

Fonctionnalité	Description
Support de la connectivité Amazon Athena permettant l'interopérabilité avec Open Lakehouse dans les Jobs Spark Batch	La base de données Amazon Athena est à présent supportée dans vos Jobs Spark Batch, avec les composants suivants : tAthenaConfiguration tAthenaInput Vous pouvez vous connecter à Athena et lire les données. L'écriture dans Athena n'est pas disponible.
Support de Spark Universal 4.0.2 dans les Jobs Spark Batch en mode Runtime local	Vous pouvez à présent exécuter vos Jobs Spark Batch avec Spark 4.0.x en mode Local. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop). Les composants suivants ne sont pas supportés avec Spark 4.0.x : Amazon DynamoDB Amazon Redshift Cassandra ElasticSearch Google BigQuery MongoDB Snowflake

Fonctionnalité

Description

Support de la connectivité Amazon Athena permettant l'interopérabilité avec Open Lakehouse dans les Jobs Spark Batch

La base de données Amazon Athena est à présent supportée dans vos Jobs Spark Batch, avec les composants suivants :

tAthenaConfiguration
tAthenaInput

Vous pouvez vous connecter à Athena et lire les données. L'écriture dans Athena n'est pas disponible.

Support de Spark Universal 4.0.2 dans les Jobs Spark Batch en mode Runtime local

Vous pouvez à présent exécuter vos Jobs Spark Batch avec Spark 4.0.x en mode Local. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop).

Les composants suivants ne sont pas supportés avec Spark 4.0.x :

Amazon DynamoDB
Amazon Redshift
Cassandra
ElasticSearch
Google BigQuery
MongoDB
Snowflake

Spark Universal 4.0.x dans un Job Spark Batch en mode Runtime local.

Intégration de données

Fonctionnalité	Description
Support de la connectivité Amazon Athena permettant l'interopérabilité avec Open Lakehouse dans les Jobs Standard	Les composants génériques de bases de données supportent à présent officiellement la connexion à Amazon Athena. Les composants suivants ont été ajoutés à la Palette : tAthenaClose tAthenaCommit tAthenaConnection tAthenaInput tAthenaOutput tAthenaRollback tAthenaRow
Support des buckets de répertoires et S3 Express One Zone pour les composants Amazon S3 dans les Jobs standards	Les composants S3 supportent à présent les buckets de répertoires Amazon S3 Express One Zone. Les buckets de répertoires nécessitent des identifiants AWS standards et les autorisations IAM appropriées pour les opérations d'endpoints (points de terminaison) régionaux.
Nouvelle méthode d'autorisation pour les composants BigQuery pour utiliser le code d'autorisation OAuth 2.0 recommandé dans les Jobs standards	Le mode d'authentification OAuth 2.0 (Authorization Code grant) (Attribution du code d'autorisation) a été ajouté aux composants BigQuery. L'autorisation est effectuée grâce à un flux d’authentification via navigateur à usage unique, démarré depuis la console Run (Exécution). La configuration est enregistrée, pour que les exécutions suivantes des Jobs puissent accéder à BigQuery sans avoir à recréer cette configuration.
Nouvelle propriété dans le composant tEmbeddingAI pour permettre aux utilisateurs de définir l'URL de base des plateformes d'IA dans les Jobs standards	L'option Base URL (URL de base) a été ajoutée à la vue Advanced settings (Paramètres avancés) du composant tEmbeddingAI, vous permettant de saisir l'adresse URL de base du serveur d'API auquel accéder. Cette option est disponible pour les plateformes Ali Bailian, Cohere, Hugging Face et Mistral AI.

Data Mapper

Fonctionnalité	Description
Support du copier-coller des colonnes de schéma d'un composant vers une structure	Vous pouvez à présent copier des colonnes de schémas provenant de composants du Studio Talend et les coller en tant qu'éléments dans des structures de mappeur hiérarchique. Les colonnes de schéma sont automatiquement converties en éléments structurels avec leur type de données approprié. Vous pouvez coller les colonnes comme éléments enfants ou frères. Pour plus d'informations, consultez Copier des colonnes de schéma à partir de composants du Studio.
Support des schémas HTTP et HTTPS dans la fonction ReadURL dans le runtime non-Eclipse	La fonction ReadURL supporte à présent les schémas HTTP et HTTPS dans le runtime non-Eclipse.
Amélioration des options de sortie des colonnes de schémas dans le tDSQL4JSON	L'option Set output column(s) (Configurer les colonnes de sortie) a été améliorée pour vous permettre de sélectionner la manière de mapper vos résultats de transformations JSON. Avec la nouvelle liste déroulante Output column mode (Mode de la colonne de sortie), vous pouvez à présent choisir de mapper votre sortie JSON vers plusieurs colonnes de schéma ou vers une seule.

Qualité de données

Fonctionnalité	Description
Support de plus d'opérateurs dans le tDQRules	Vous pouvez à présent utiliser les opérateurs suivants dans le composant tDQRules : Matches regex (Correspond à la regex)/Does not match regex (Ne correspond pas à la regex) Is one of (Est dans)/Is not one of (N'est pas dans) Is before (Est avant)/Is after (Est après) Is before or equal to (Est avant ou égal à)/Is after or equal to (Est après ou égal à) Is equal to (Est égal à)/Is not equal to (N'est pas égal à) La sensibilité à la casse des opérateurs de chaînes de caractères (String) est à présent supportée.
Affichage des éléments récents	Vous pouvez à présent afficher les éléments récents.

Fonctionnalité

Description

Support de plus d'opérateurs dans le tDQRules

Vous pouvez à présent utiliser les opérateurs suivants dans le composant tDQRules :

Matches regex (Correspond à la regex)/Does not match regex (Ne correspond pas à la regex)
Is one of (Est dans)/Is not one of (N'est pas dans)
Is before (Est avant)/Is after (Est après)
Is before or equal to (Est avant ou égal à)/Is after or equal to (Est après ou égal à)
Is equal to (Est égal à)/Is not equal to (N'est pas égal à)

La sensibilité à la casse des opérateurs de chaînes de caractères (String) est à présent supportée.

Affichage des éléments récents

Vous pouvez à présent afficher les éléments récents.