tRecollector

Ce composant permet la sortie des résultats d'exécution parallèle, selon le tDepartitioner.

Notez que le Studio Talend permet l'implémentation automatique de la parallélisation à travers le Job sans l'utilisation de composants de parallélisation. Talend recommande l'utilisation de cette approche. Pour plus d'informations, consultez Activer la parallélisation des flux de données. Cependant, si vous souhaitez comprendre comment utiliser ces composants de parallélisation spécifiques, gardez à l'esprit que les composants de parallélisation fonctionnent les uns avec les autres pour accomplir des exécutions parallèles sur des processus donnés : le composant tPartitioner divise les enregistrements d'entrée en un nombre spécifique de process ; le tCollector envoie ces process aux composants suivants pour une exécution parallèle ; le tDepartitioner regroupe les sorties des process parallèles traités ; le tRecollector capture la sortie d'un composant tDepartitioner donné et envoie les données capturées au composant suivant.

Il capture et écrit en sortie les résultats de l'exécution parallèle regroupés par un tDepartitioner donné.

Ce composant n'est pas intégré par défaut à votre Studio Talend. Vous devez l'installer à l'aide du gestionnaire des fonctionnalités. Pour plus d'informations, consultez Installer les fonctionnalités à l'aide du Gestionnaire des fonctionnalités.

Propriétés du tRecollector Standard

Ces propriétés sont utilisées pour configurer le tRecollector s'exécutant dans le framework de Jobs Standard.

Le composant tRecollector Standard appartient à la famille Orchestration.

Ce composant est disponible dans les produits Talend avec Big Data, Talend Data Management Platform, Talend Data Services Platform, Talend MDM Platform et Talend Data Fabric.

Basic settings

Schema et Edit Schema	Un schéma est une description de lignes, il définit le nombre de champ qui sont traités et passés au composant suivant. Le schéma est soit local (Built-in), soit distant dans le Repository. Créez le schéma en cliquant sur le bouton Edit Schema. Si le schéma est en mode Repository, trois options sont disponibles : View schema : sélectionnez cette option afin de voir uniquement le schéma. Change to built-in property : sélectionnez cette option pour passer le schéma en mode Built-In et effectuer des modifications locales. Update repository connection : sélectionnez cette option afin de modifier le schéma stocké dans le référentiel et décider de propager ou non les modifications à tous les Jobs. Si vous souhaitez propager les modifications uniquement au Job courant, cliquez sur No et sélectionnez à nouveau la métadonnée du schéma dans la fenêtre Repository Content.
Linked Departitioner	Sélectionnez le composant tDepartitioner duquel vous souhaitez recevoir les résultats d'exécution parallèle.
Merge sort partitions	Cochez cette case pour utiliser l'algorithme Mergesort afin d'assurer la cohérence des données.

Schema et Edit Schema

Un schéma est une description de lignes, il définit le nombre de champ qui sont traités et passés au composant suivant. Le schéma est soit local (Built-in), soit distant dans le Repository.

Créez le schéma en cliquant sur le bouton Edit Schema. Si le schéma est en mode Repository, trois options sont disponibles :

View schema : sélectionnez cette option afin de voir uniquement le schéma.
Change to built-in property : sélectionnez cette option pour passer le schéma en mode Built-In et effectuer des modifications locales.
Update repository connection : sélectionnez cette option afin de modifier le schéma stocké dans le référentiel et décider de propager ou non les modifications à tous les Jobs.

Si vous souhaitez propager les modifications uniquement au Job courant, cliquez sur No et sélectionnez à nouveau la métadonnée du schéma dans la fenêtre Repository Content.

Linked Departitioner

Sélectionnez le composant tDepartitioner duquel vous souhaitez recevoir les résultats d'exécution parallèle.

Merge sort partitions

Cochez cette case pour utiliser l'algorithme Mergesort afin d'assurer la cohérence des données.

Advanced settings

tStatCatcher Statistics	Cochez cette case afin de collecter les données de log au niveau des composants.

Global Variables

Variables globales	ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case. NB_LINE : nombre de lignes traitées. Cette variable est une variable After et retourne un entier. Une variable Flow fonctionne durant l'exécution d'un composant. Une variable After fonctionne après l'exécution d'un composant. Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser. Pour plus d'informations concernant les variables, consultez Utiliser les contextes et les variables.

Variables globales

ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case.

NB_LINE : nombre de lignes traitées. Cette variable est une variable After et retourne un entier.

Une variable Flow fonctionne durant l'exécution d'un composant. Une variable After fonctionne après l'exécution d'un composant.

Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser.

Pour plus d'informations concernant les variables, consultez Utiliser les contextes et les variables.

Utilisation

Règle d'utilisation	Ce composant est un composant de début, déclenché par un tPartitioner afin de capturer les résultats d'exécution parallèle retournés par un tDepartitioner sélectionné. Ce composant est relié à un tPartitioner via un lien Trigger > Start.
Connections	Liens de sortie (de ce composant à un autre) : Row : Main. Liens d'entrée (d'un autre composant à celui-ci) : Trigger : Start. Pour plus d'informations concernant les connexions, consultez Utilisation des connexions dans un Job.

Règle d'utilisation

Ce composant est un composant de début, déclenché par un tPartitioner afin de capturer les résultats d'exécution parallèle retournés par un tDepartitioner sélectionné.

Ce composant est relié à un tPartitioner via un lien Trigger > Start.

Connections

Liens de sortie (de ce composant à un autre) :

Row : Main.

Liens d'entrée (d'un autre composant à celui-ci) :

Trigger : Start.

Pour plus d'informations concernant les connexions, consultez Utilisation des connexions dans un Job.

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.

Laissez vos commentaires ici