Accéder au contenu principal Passer au contenu complémentaire

Nouveautés de la version R2021-08

Big Data : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Availability-noteBeta
Support de la distribution Azure Synapse avec Spark 3.0

Vous pouvez à présent utiliser Azure Synapse Analytics avec les pools Apache Spark en tant que nouvelle distribution pour vos Jobs Spark Batch et Spark Streaming avec Spark 3.0 en mode YARN cluster uniquement. Vous pouvez le configurer dans la vue Spark Configuration (Configuration Spark) de vos Jobs Spark. Pour plus d'informations, consultez Defining the Azure Synapse Analytics connection parameters (Définir les paramètres de connexion à Azure Synapse Analytics).

Azure Synapse Analytics vous permet de traiter vos données via différents moteurs analytiques. Avec les pools Apache Spark, différentes fonctionnalités de calcul sont possibles (comme la rapidité et l'efficacité), ainsi que la compatibilité avec le stockage ADLS Gen2.

Note InformationsImportant : Comme cette fonctionnalité est disponible en fonctionnalité bêta uniquement, elle ne convient pas à des environnements de production.

Tous les produits Talend incluant Big Data

Expressions avancées pour les conditions de jointure dans le tMap
Vous pouvez à présent utiliser la zone d'expression Filter dans l'éditeur de mapping du tMap pour saisir une expression avancée, afin de joindre des conditions dans des Jobs Spark Batch à l'aide de l'API Dataset. Cette fonctionnalité vous permet de filtrer vos données à partir de la condition de jointure, avec les expressions suivantes :
  • expression simple avec les opérateurs <, >, <=, >= ou ==
  • expression complexe combinant plusieurs expressions simples avec l'opérateur || ou &&
Par exemple, vous pouvez utiliser une expression complexe sur les dates :

Tous les produits Talend incluant Big Data

Data Integration : nouvelles fonctionnalités

Fonctionnalité

Description

Disponible dans

Support de suppression d'anciennes versions de plusieurs éléments de projets

Une vue Cleanup a été ajoutée sous le nœud General > Version Management dans la boîte de dialogue Project Settings ce qui vous permet de

  • supprimer toutes les anciennes versions et conserver uniquement la dernière pour plusieurs éléments de projets, ou
  • supprimer toutes les versions antérieures à une version spécifique pour plusieurs éléments de projets.
Note InformationsAvertissement : Aucune vérification des dépendances n'est effectuée lors de la suppression des anciennes versions des Jobs, Joblets, Routes et Routelets. Il est recommandé d'effectuer la suppression et la validation du nettoyage sur une branche.

Tous les produits Talend incluant le Studio Talend

tCouchbaseInput : support de N1QL pour l'instruction Analytics

Le composant tCouchbaseInput fournit à présent l'option N1QL for Analytics (N1QL pour Analytics) dans la liste déroulante Query type (Type de requête). Cette option vous permet d'effectuer des requêtes sur des données semi-structurées à l'aide de N1QL pour les instructions Analytics.

Tous les produits Talend incluant le Studio Talend

tSQSOutput : récupération et transmission d'ID de messages aux composants subséquents

Le composant tSQSOutput peut à présent récupérer les ID des messages reçus et les passer aux composants subséquents. Cela s'effectue en ajoutant la colonne MessageID dans le schéma de sortie. Cette fonction est accessible lorsque l'option Use batch mode n'est pas sélectionnée.

Tous les produits Talend incluant le Studio Talend

tAzureStoragePut : utilisation du caractère +

Le composant tAzureStoragePut fournit à présent l'option Allow to escape the '+' sign in filemask, qui permet, lorsqu'elle est sélectionnée, de traiter le caractère + comme un caractère normal dans le champ Files. Lorsque cette option n'est pas sélectionnée, le caractère + est traité comme un opérateur d'expression régulière.

Tous les produits Talend incluant le Studio Talend

tSAPTableInput : les données NUMC sont mappées comme des chaînes de caractères

Le composant tSAPTableInput fournit à présent l'option Read NUMC data as string in the dynamic column, qui permet, lorsqu'elle est sélectionnée, de traiter les données de type NUMC dans la colonne dynamique comme chaînes de caractères. Lorsque cette option n'est pas sélectionnée, les données de type NUMC sont traitées comme des entiers.

Tous les produits Talend incluant le Studio Talend

Composants MongoDB : support du mécanisme d'authentification SCRAM-SHA-256 SASL pour MongoDB 4.4.x et supérieures

Les composants MongoDB supportent le mécanisme d'authentification SCRAM-SHA-256 SASL à partir de MongoDB 4.4.x. Consultez Mécanismes d'authentification (uniquement en anglais) pour plus d'informations.

Tous les produits Talend incluant Big Data

Spécification de la connexion SAP à utiliser

Les composants tSAPTableInput et tELTSAPMap fournissent à présent le champ Connection id, via lequel vous pouvez spécifier l'ID de la connexion SAP à utiliser. L'ID de la connexion SAP est le nom du fichier de configuration de la connexion à SAP.

Ce champ requiert l'application du patch SAP RFC Server Patch_20210820_TDI-45536_v1-7.3.1 (uniquement en anglais). Le patch vous permet d'établir plusieurs connexions à SAP à l'aide de SAP RFC Server. Pour plus d'informations concernant la configuration de SAP RFC Server et des connexions à SAP, consultez Configurer le RFC Server.

Tous les produits Talend incluant le Studio Talend

tSAPDataSourceReceiver et tSAPIDocReceiver : possibilité de traiter les informations de l'hôte partenaire

Les composants tSAPDataSourceReceiver et tSAPIDocReceiver ont à présent la capacité de traiter les informations de l'hôte partenaire. Les informations identifient la connexion SAP depuis laquelle un message est reçu.

  • Le composant tSAPDataSourceReceiver fournit une nouvelle colonne prédéfinie nommée partnerHost dans son schéma.
  • Le composant tSAPIDocReceiver insère les informations de l'hôte partenaire dans les en-têtes des messages qu'il extrait.

Ce champ requiert l'application du patch SAP RFC Server Patch_20210820_TDI-45536_v1-7.3.1 (uniquement en anglais). Le patch vous permet d'établir plusieurs connexions à SAP à l'aide de SAP RFC Server. Pour plus d'informations concernant la configuration de SAP RFC Server et des connexions à SAP, consultez Configurer le RFC Server.

Tous les produits Talend incluant le Studio Talend

Nouveaux composants

Cette version fournit les nouveaux composants suivants : tFileInputParquet et tFileOutputParquet.

Tous les produits Talend incluant le Studio Talend

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.