tCollector

Ce composant peuple des processus d'exécutions parallèles avec des process générés par le tPartitioner.

Notez que le Studio Talend permet l'implémentation automatique de la parallélisation à travers le Job sans l'utilisation de composants de parallélisation. Talend recommande l'utilisation de cette approche. Pour plus d'informations, consultez Activer la parallélisation des flux de données. Cependant, si vous souhaitez comprendre comment utiliser ces composants de parallélisation spécifiques, gardez à l'esprit que les composants de parallélisation fonctionnent les uns avec les autres pour accomplir des exécutions parallèles sur des processus donnés : le composant tPartitioner divise les enregistrements d'entrée en un nombre spécifique de process ; le tCollector envoie ces process aux composants suivants pour une exécution parallèle ; le tDepartitioner regroupe les sorties des process parallèles traités ; le tRecollector capture la sortie d'un composant tDepartitioner donné et envoie les données capturées au composant suivant.

Il reçoit des process parallèles du composant tPartitioner en les envoie aux composants suivants, pour une exécution parallèle.

Ce composant n'est pas intégré par défaut à votre Studio Talend. Vous devez l'installer à l'aide du gestionnaire des fonctionnalités. Pour plus d'informations, consultez Installer les fonctionnalités à l'aide du Gestionnaire des fonctionnalités.

Propriétés du tCollector Standard

Ces propriétés sont utilisées pour configurer le tCollector s'exécutant dans le framework de Jobs Standard.

Le composant tCollector Standard appartient à la famille Orchestration.

Ce composant est disponible dans les produits Talend avec Big Data, Talend Data Management Platform, Talend Data Services Platform, Talend MDM Platform et Talend Data Fabric.

Basic settings

Schema et Edit Schema	Un schéma est une description de lignes, il définit le nombre de champ qui sont traités et passés au composant suivant. Le schéma est soit local (Built-in), soit distant dans le Repository. Créez le schéma en cliquant sur le bouton Edit Schema. Si le schéma est en mode Repository, trois options sont disponibles : View schema : sélectionnez cette option afin de voir uniquement le schéma. Change to built-in property : sélectionnez cette option pour passer le schéma en mode Built-In et effectuer des modifications locales. Update repository connection : sélectionnez cette option afin de modifier le schéma stocké dans le référentiel et décider de propager ou non les modifications à tous les Jobs. Si vous souhaitez propager les modifications uniquement au Job courant, cliquez sur No et sélectionnez à nouveau la métadonnée du schéma dans la fenêtre Repository Content.

Schema et Edit Schema

Un schéma est une description de lignes, il définit le nombre de champ qui sont traités et passés au composant suivant. Le schéma est soit local (Built-in), soit distant dans le Repository.

Créez le schéma en cliquant sur le bouton Edit Schema. Si le schéma est en mode Repository, trois options sont disponibles :

View schema : sélectionnez cette option afin de voir uniquement le schéma.
Change to built-in property : sélectionnez cette option pour passer le schéma en mode Built-In et effectuer des modifications locales.
Update repository connection : sélectionnez cette option afin de modifier le schéma stocké dans le référentiel et décider de propager ou non les modifications à tous les Jobs.

Si vous souhaitez propager les modifications uniquement au Job courant, cliquez sur No et sélectionnez à nouveau la métadonnée du schéma dans la fenêtre Repository Content.

Advanced settings

tStatCatcher Statistics	Cochez cette case afin de collecter les données de log au niveau des composants.

Global Variables

Variables globales	ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case. NB_LINE : nombre de lignes traitées. Cette variable est une variable After et retourne un entier. THREAD_ID : ID du process traité par le composant. Disponible en tant que variable Flow. Une variable Flow fonctionne durant l'exécution d'un composant. Une variable After fonctionne après l'exécution d'un composant. Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser. Pour plus d'informations concernant les variables, consultez Utiliser les contextes et les variables.

Variables globales

ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case.

NB_LINE : nombre de lignes traitées. Cette variable est une variable After et retourne un entier.

THREAD_ID : ID du process traité par le composant. Disponible en tant que variable Flow.

Une variable Flow fonctionne durant l'exécution d'un composant. Une variable After fonctionne après l'exécution d'un composant.

Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser.

Pour plus d'informations concernant les variables, consultez Utiliser les contextes et les variables.

Utilisation

Règle d'utilisation	Ce composant doit être placé après un tPartitioner. Un lien Start doit les relier. Ce composant démarre des processus parallèles, dans un Job, créés via d'autres composants.
Connections	Liens de sortie (de ce composant à un autre) : Row : Main. Liens d'entrée (d'un autre composant à celui-ci) : Trigger : Start. Pour plus d'informations concernant les connexions, consultez Utilisation des connexions dans un Job.

Règle d'utilisation

Ce composant doit être placé après un tPartitioner. Un lien Start doit les relier.

Ce composant démarre des processus parallèles, dans un Job, créés via d'autres composants.

Connections

Liens de sortie (de ce composant à un autre) :

Row : Main.

Liens d'entrée (d'un autre composant à celui-ci) :

Trigger : Start.

Pour plus d'informations concernant les connexions, consultez Utilisation des connexions dans un Job.

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – faites-le-nous savoir.

Laissez vos commentaires ici