Exécution de Jobs Big Data Streaming à partir du Big Data Streaming Conductor

Dans la page Big Data Streaming de Talend Administration Center, une tâche d'exécution rassemble les phases de génération, de déploiement et d'exécution de script pour des Jobs Big Data Streaming, c'est-à-dire les Jobs Spark Streaming et Storm. Vous pouvez lancer une tâche à partir de l'application Web.

Ce module est utilisé quasiment comme le module Job Conductor. Il est donc recommandé de vous référer à la section Exécution de Jobs d'intégration de données depuis le Job Conductor afin de découvrir comment utiliser le module Big Data Streaming Conductor. La section courante explique uniquement les différences entre les fonctionnalités du Big Data Streaming Conductor et du Job Conductor :

• Ce Conductor est utilisé pour gérer les Jobs Spark Streaming et Storm uniquement.
• La fonctionnalité Triggers n'est pas disponible pour le Big Data Streaming Conductor, car, une fois qu'un Job Streaming l'a démarré, il s'exécute en continu et traite chaque message entrant dès qu'il est publié.
• Lorsque ce Conductor est utilisé pour gérer un Job Storm, le bouton Monitor dans la page Big Data Streaming Conductor vous dirige vers la console Web Storm UI fournie par le système Storm.
• Puisqu'un Topology Storm ne peut être mis en pause ou repris, vous ne pouvez mettre en pause ou reprendre une tâche Storm depuis la page Big Data Streaming Conductor.
• Lorsque vous exécutez une tâche Storm depuis la page Big Data Streaming Conductor, le Conductor arrête et supprime tout Topology ayant le même nom que le Topology que vous souhaitez exécuter dans le cluster Storm, puis soumet ce nouveau Topology au cluster. Cette fonctionnalité remplace la manière dont vous avez défini l'exécution du Topology dans l'onglet Storm configuration du Job Storm dans le Studio.
• Arrêter une tâche Storm depuis la page Big Data Streaming à l'aide du bouton Kill arrête et supprime le Topology Storm en cours d'exécution dans le cluster Storm. Cette fonctionnalité remplace la manière dont vous avez défini l'arrêt du Topology dans l'onglet Storm configuration du Job Storm dans le Studio.
• La fonctionnalité JVM parameters n'est pas disponible dans le module Big Data Streaming Conductor.