Accéder au contenu principal Passer au contenu complémentaire

Nouveautés de la version R2022-01

Big Data : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Support de CDP Private Cloud Base et du Cloud Public avec Atlas Si vous utilisez CDP Private Cloud Base ou le Cloud Public CDP pour exécuter vos Jobs Spark et qu'Apache Atlas a été installé dans votre cluster Cloudera, vous pouvez à présent utiliser Atlas lorsque vous exécutez votre Job.

Atlas vous permet de suivre le lignage d'un flux de données spécifié afin de comprendre comment ces données ont été générées par un Job Spark.

Tous les produits Talend avec Big Data nécessitant souscription

Availability-noteBeta
Support de l'auhentification à CDP Public Cloud via Knox
Vous pouvez à présent vous authentifier à l'aide de Knox lorsque vous utilisez CDP Public Cloud 7.2.x avec Hive pour exécuter vos Jobs Spark.

Comme cette fonctionnalité est disponible en fonctionnalité bêta uniquement, elle ne convient pas à des environnements de production.

Tous les produits Talend avec Big Data nécessitant souscription

Hive Warehouse Connector supporte le chiffrement SSL et l'authentification Kerberos sur le Cloud public CDP avec Knox Vous pouvez à présent utiliser le chiffrement SSL et l'authentification Kerberos lorsque vous configurez la connexion à Hive Warehouse Connector avec le composant tHiveWarehouseConfiguration lorsque vous vous authentifiez à votre Job Spark Batch avec le Cloud Public Cloudera CDP et Knox.
Lorsque vous activez ces deux options, cela assure une meilleure protection de vos données :
  • Le SSL vous permet de protéger vos données en laissant chiffrées les informations sensibles
  • Kerberos vous permet de fournir une authentification sécurisée à vos données

Tous les produits Talend avec Big Data nécessitant souscription

La version de Cloudera est renommée pour refléter la compatibilité du Studio Talend et de CDP Dans l'interface du Studio Talend, dans la fenêtre Hadoop Configuration Import Wizard (Assistant d'import de configuration Hadoop) et dans la vue Spark Configuration (Configuration Spark) de votre Job Spark, la version de Cloudera a été renommée de Cloudera CDP 7.1.1.0-xxx à Cloudera CDP 7.x. Cette modification reflète la compatibilité du Studio Talend et des distributions CDP Private Cloud Base (7.1.x) et CDP Public Cloud (7.2.x).

Tous les produits Talend avec Big Data nécessitant souscription

Mise à jour de Kafka en version 2.4.x Le Studio Talend supporte à présent la version 2.4.x de Kafka dans tous les composants Kafka.

Tous les produits Talend avec Big Data nécessitant souscription

Nouvelles variables After pour le tKafkaOutput dans les Jobs Standard Vous pouvez à présent utiliser les variables After suivantes pour le composant tKafkaOutput dans des Jobs Standard :
  • ERROR_MESSAGE : affiche le message d'erreur généré par le composant lorsqu'une erreur survient.
  • NB_LINE : affiche le nombre de lignes traitées.
  • NB_ERRORS : affiche le nombre de lignes traitées avec erreurs.
  • NB_SUCCESS : affiche le nombre de lignes traitées avec succès.

Ces variables sont utiles pour couvrir les erreurs lorsque l'option Die on error (Arrêter en cas d'erreur) de la vue Basic settings (Paramètres simples) du tKafkaOutput est désactivée.

Tous les produits Talend avec Big Data nécessitant souscription

Améliorations du tKafkaInput et du tKafkaOutput dans les Jobs Standard Avec les améliorations apportées aux composants tKafkaInput et tKafkaOutput, vous pouvez à rpésent effectuer les actions suivantes dans vos Jobs Standard :
  • Support de Confluent Schema Registry
  • Support des désérialiseurs personnalisés
  • Support de consommation des messages contenant des données Avro
  • Exposer les objets Kafka et autoriser la création d'objets en dehors du composant, à stocker dans Kafka
  • Exposer et configurer l'en-tête du message
  • Exposer la clé, le topic et la partition
  • Écraser les paramètres de configuration via l'onglet Advanced settings (Paramètres avancés)

Tous les produits Talend avec Big Data nécessitant souscription

tMongoDBInput : nouvelles options disponibles dans les Jobs Standard
Le composant tMongoDBInput fournit les deux nouvelles options suivantes :
  • Skip (Ignorer), qui spécifie le nombre de lignes récupérées à ignorer.
  • Batch size (Taille du lot), qui spécifie le nombre maximal de lignes pouvant être récupérées en un lot.

Tous les produits Talend avec Big Data nécessitant souscription

Ajout et spécification des opérations de mise à jour pour des nœuds JSON spécifiques dans les Jobs Standard Cette version vous permet d'ajouter et de spécifier des opérations de mise à jour pour des nœuds JSON spécifiques avec MongoDB 4.4.X ou supérieures. Cette fonctionnalité s'applique aux composants tMongoDBOutput et tCosmosDBOutput uniquement lorsque vous sélectionnez Set ou Upsert with set dans la liste Action on data (Action sur les données) dans la vue Basic settings (Paramètres simples).

Tous les produits Talend avec Big Data nécessitant souscription

Data Integration : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Connexion à Talend Cloud par jeton uniquement Vous n'avez besoin de saisir que votre jeton, au lieu de votre identifiant et votre jeton, lorsque vous vous connectez à Talend Cloud dans le Studio Talend.

Tous les produits Talend Cloud et Talend Data Fabric

Option pour empêcher la publication dans Talend Cloud des artefacts dont le push des modifications n'a pas été effectué Vous pouvez à présent configurer le Studio Talend pour empêcher la publication d'un artefact dans Talend Cloud s'il contient des modifications dont le push vers le référentiel Git n'a pas été effectué.

Tous les produits Talend Cloud et Talend Data Fabric

Composants Salesforce : support de la dernière version de l'Endpoint Les composants Salesforce de cette version supportent la dernière version de l'Endpoint, la version 52.

Tous les produits Talend

Nouveaux composants : tApacheKuduInput et tApacheKuduOutput Cette version fournit deux nouveaux composants : le tApacheKuduInput et le tApacheKuduOutput, vous permettant d'accéder à un cluster Apache Kudu.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Nouveau composant : tAzureAdlsGen2Connection Cette version fournit le composant tAzureAdlsGen2Connection, qui crée des connexions au système de fichiers ADLS Gen2 pour d'autres composants Azure ADLS Gen2 utilisant un compte de stockage Azure. De plus, les composants tAzureAdlsGen2Input et tAzureAdlsGen2Output fournissent deux nouvelles options : Use an existing connection (Utiliser une connexion existante) et Timeout (Délai avant expiration). L'option Use an existing connection (Utiliser une connexion existante) vous permet d'utiliser une connexion créée par un tAzureAdlsGen2Connection. L'option Timeout (Délai avant expiration) spécifie le délai avant expiration de la création de la connexion.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Composants ELT Map : nouvelle option disponible

Une nouvelle option, Dry run (Test à blanc), est disponible. Lorsque cette option est sélectionnée, le composant génère une requête et la passe au composant ELT de sortie connecté, qui ajoute la requête à la variable QUERY, sans effectuer d'action sur la base de données (connexion à la base de données ou exécution de requête, par exemple).

Cette fonctionnalité s'applique aux composants tELTMap, tELTMSSqlMap et tELTOracleMap.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Composants ELT de sortie : nouvelle variable fournie

Une nouvelle variable AFTER, QUERY, est fournie. Cette variable est alimentée à partir du composant ELT Map auquel se connecte le composant. Elle permet aux autres composants d'utiliser la requête générée.

Cette fonctionnalité s'applique aux composants tELTOutput, tELTMSSqlOutput et tELTOracleOutput.

Tous les produits Talend nécessitant souscription avec le Studio Talend

Data Mapper : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Support de JSONL Le lecteur JSON reconnaît automatiquement le format JSONL. Une nouvelle option dans la représentation JSON vous permet d'écrire du JSONL.

Tous les produits Talend Platform et Data Fabric

Support du mot-clé oneOf dans le lecteur JSON Le lecteur JSON a été amélioré et vous permet à présent de créer des expressions pour sélectionner l'alternative correcte lorsqu'une structure contient le mot-clé oneOf.

Tous les produits Talend Platform et Data Fabric

Intégration d'applications : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Amélioration du rapport d'analyse de projet pour avertir des risques de dépendances des composants personnalisés

Le rapport d'analyse de projet peut à présent avertir des risques de dépendances des composants personnalisés.

Tous les produits Talend avec ESB nécessitant souscription

Synchronisation des noms de régions dans le cAWSConnection avec AWS

Les noms de régions dans le cAWSConnection sont synchronisés avec AWS.

Tous les produits Talend avec ESB nécessitant souscription

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.