Accéder au contenu principal Passer au contenu complémentaire

Nouveautés de la version R2022-04

Big Data : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Support de l'expérience Cloudera Data Engineering avec AWS on Spark Universal 3.1.x Vous pouvez à présent exécuter vos Jobs Spark sur Cloudera Data Engineering, à l'aide de Spark Universal avec Spark 3.1.x. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark.

Tous les produits Talend avec Big Data nécessitant souscription

Support de Databricks Runtime 8.x à 9.x avec des clusters de jobs sur Spark Universal 3.1.x Vous pouvez à présent exécuter vos Jobs Spark sur un cluster de jobs Databricks, à l'aide de Spark Universal avec Spark 3.1.x. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop).

Lorsque vous sélectionnez ce mode, le Studio Talend est compatible avec les versions 8.x à 9.x de Databricks.

Tous les produits Talend avec Big Data nécessitant souscription

Availability-noteBeta
Support de Spark Universal 3.2.x en mode local
Vous pouvez à présent exécuter vos Jobs Spark à l'aide de Spark Universal avec Spark 3.2.x en mode Local. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop).

Lorsque vous sélectionnez ce mode, le Studio Talend construit l'environnement Spark en lui-même lors de l'exécution, pour exécuter le Job localement dans le Studio Talend.

Les composants Talend Data Mapper Big Data (tHConvertFile, tHMapFile, tHMapInput et tHMapRecord) ne sont pas compatibles avec Spark 3.2.x pour le moment.

Comme cette fonctionnalité est disponible en fonctionnalité bêta uniquement, elle ne convient pas à des environnements de production.

Tous les produits Talend avec Big Data nécessitant souscription

Support de Google Dataproc 2.0.x sur Spark Universal 3.1.x Vous pouvez à présent exécuter vos Jobs Spark sur un cluster Google Dataproc, à l'aide de Spark Universal avec Spark 3.1.x. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark.

Lorsque vous sélectionnez ce mode, le Studio Talend est compatible avec la version 2.0.x de Dataproc uniquement sur les Jobs Spark Batch et Spark Streaming. Les Jobs Standard contenant des composants Hive ne sont pas supportés pour le moment.

Tous les produits Talend avec Big Data nécessitant souscription

Support de plusieurs composants tGSConfiguration dans les Jobs Spark Vous pouvez utiliser plusieurs composants tGSConfiguration dans un Job, pour utiliser différents buckets Google Storage avec différents identifiants. Cette fonctionnalité s'applique aux Jobs Spark Batch et Spark Streaming.

Tous les produits Talend avec Big Data nécessitant souscription

Support de CDP Public Cloud avec Knox et Impala dans les Jobs Standard Si vous utilisez CDP Public Cloud pour exécuter vos Jobs Standard, vous pouvez à présent utiliser Knox et Impala.

Tous les produits Talend avec Big Data nécessitant souscription

Support des distributions AWS EMR 6.3.x, 6.4.x et 6.5.x avec Spark Universal 3.1.x Vous pouvez à présent exécuter vos Jobs Spark sur un cluster AWS EMR, à l'aide de Spark Universal avec Spark 3.1.x en mode Yarn cluster. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnée Hadoop Cluster Connection (Connexion au cluster Hadoop).

Lorsque vous sélectionnez ce mode, le Studio Talend est compatible avec les versions 6.3.x, 6.4.x et 6.5.x de AWS EMR. Les Jobs Spark ne fonctionnent pas avec le composant tHiveConnection pour le moment.

Tous les produits Talend avec Big Data nécessitant souscription

Availability-noteBeta
Support du cluster standalone Open Source Apache Spark sur Spark Universal 3.2.x
Vous pouvez à présent exécuter vos Jobs Spark en mode Standalone avec Spark Universal 3.2.x. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark.

Lorsque vous sélectionnez ce mode, le Studio Talend se connecte à un cluster compatible Spark pour exécuter le Job depuis ce cluster.

  • Comme cette fonctionnalité est disponible en fonctionnalité bêta uniquement, elle ne convient pas à des environnements de production.
  • Kerberos n'est pas disponible en version bêta.

Tous les produits Talend avec Big Data nécessitant souscription

Availability-noteBeta
Support du Principal de service Azure Active Directory (AD) pour les pools Azure Synapse Spark dans les Jobs Spark

Lorsque vous utilisez Azure Synapse Analytics avec les pools Apache Spark comme distribution pour vos Jobs Spark Batch et Spark Streaming, vous pouvez à présent vous authentifier avec le Principal de service Azure AD. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark.

Comme cette fonctionnalité est disponible en fonctionnalité bêta uniquement, elle ne convient pas à des environnements de production.

Tous les produits Talend avec Big Data nécessitant souscription

Data Integration : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Le Studio Talend peut à présent créer automatiquement les branches de test pour tester la migration des projets distants

Le Studio Talend fournit à présent un assistant Migrate projects or test (Migrer les projets ou les tests) avec les deux options suivantes :
  • Migrate (Migrer) : migre le projet sans tester.
  • Test (Tester) : teste la migration des projets en créant des branches de test et en migrant le projet sur ces branches de test pour conserver l'état de la branche de production.

L'assistant est affiché lorsque vous ouvrez un projet distant dont la version est inférieure à la version du Studio Talend.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Nouveau composant pour écrire des données dans un ADSO actif via SAP Java Connector version 3

Cette version fournit le composant tSAPADSOOutput, qui vous permet d'écrire des données dans un Advanced Data Store Object (ADSO) actif, via SAP Java Connector version 3.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Nouveaux composants pour respectivement lister et supprimer des fichiers sur un hôte Samba

Cette version fournit les deux composants suivants.

  • Le tSambaList, qui liste les fichiers d'un répertoire sur un hôte Samba v2 ou v3 et passe les informations relatives aux fichiers au composant suivant.

  • Le tSambaDelete, qui supprime un fichier d'un répertoire sur un hôte Samba v2 ou v3 ou qui supprime le répertoire complet.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Support de la version 2019 de Microsoft SQL Server

Cette version fournit le support de Microsoft SQL Server version 2019, ce qui permet d'utiliser l'authentification Azure Active Directory lors de la connexion à une base de données Microsoft SQL Server.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Support du pilote Redshift v2.x

Cette version fournit le support du pilote Redshift v2.x. Une option Driver version (Version du pilote) a été ajoutée à ces composnats Redshift : tRedshiftInput, tRedshiftUnload, tRedshiftOutput, tRedshiftConnection, tRedshiftRow, tRedshiftOutputBulkExec, tRedshiftBulkExec.

La manière dont vous spécifiez les paramètres JDBC varie entre la version 1 et la version 2 du pilote. Pour plus d'informations, consultez Propriétés du tRedshiftConnection Standard.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Support du schéma dynamique pour le tSAPTableInput La fonctionnalité de schéma dynamique est à présent supportée pour le tSAPTableInput dans vos Jobs Standard avec l'utilisation du tSetDynamicSchema. La fonction de schéma dynamique vous permet de configurer un schéma de manière non-statique afin que vous n'ayez pas à concevoir à nouveau votre Job pour les modifications de schéma à venir, tout en garantissant que votre schéma fonctionne à tout moment. Vous pouvez à présent fournir des tables, des colonnes et des jointures de manière dynamique.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Data Quality : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Nouvelle fonction de dérivation de clé Les composants de confidentialité des données ont été améliorés grâce à l'ajout de la fonction de dérivation de clé PBKDF2, avec 300 000 itérations. Cette fonction est celle par défaut et sera utilisée pour les nouveaux Jobs.

Pour des raisons de compatibilité avec les Jobs antérieurs à la version 8.0 R2022-04, PBKDF2 avec 65 536 itérations est toujours supporté, mais déprécié.

Sélectionnez la fonction de dérivation de clé dans l'onglet Advanced settings (Paramètres avancés).
La nouvelle fonction est disponible dans :
  • tDataEncrypt
  • tDataDecrypt
  • tDataMasking
  • tDataUnmasking
  • tPatternMasking
  • tPatternUnmasking

Tous les produits Talend Platform et Data Fabric

Intégration d'applications : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Les endpoints de monitoring des microservices par défaut sont à présent limités aux informations (info), à la santé (health) et à Jolokia.

Les microservices construits avec le Studio Talend fournissent l'accès aux endpoints Spring Boot Actuator. Les endpoints de monitoring par défaut sont à présent limités aux informations (info), à la santé (health) et à Jolokia.

Tous les produits Talend avec ESB nécessitant souscription

Intégration continue : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Le Builder Talend d'intégration continue a été mis à niveau en version 8.0.4 Le Builder Talend d'intégration continue a été mis à niveau, passant de la version 8.0.1 à la version 8.0.4.

Utilisez le Builder Talend d'intégration continue 8.0.4 dans vos commandes d'intégration continue ou dans vos scripts de pipelines, à partir de cette version mensuelle et jusqu'à la sortie d'une nouvelle version du Builder Talend d'intégration continue.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Nouvelle commande d'installation de Talend CommandLine dans une étape d'intégration continue standalone Une nouvelle commande mvn org.talend.ci:builder-maven-plugin:8.0.4:install est disponible, elle vous permet d'installer Talend CommandLine dans une étape d'intégration continue standalone, sans avoir à créer de projet ou à générer de fichier POM.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.