Surveillance et exécution de vos tâches de données

Surveillez et agissez sur l'état et la progression de vos tâches de données grâce aux vues de surveillance. Une vue de surveillance vous permet de voir l'état d'un sous-ensemble des tâches de données auxquelles vous avez accès pour les surveiller dans le client, via un filtre. Vous pouvez créer plusieurs vues pour surveiller différents aspects de vos pipelines de données.

• Accédez à Intégration de données >  Vues de surveillance pour afficher les vues de surveillance.

Outre la création de vues de surveillance personnalisées, vous pouvez également utiliser la vue Toutes les tâches préparée pour afficher l'ensemble des tâches de données exécutables de tous les projets.

Création d'une vue de surveillance

Créez une vue de surveillance personnalisée pour commencer à surveiller vos tâches de données.

1. Cliquez sur Créer et sélectionnez Vue de surveillance.

2. Saisissez un nom et une description de la vue de surveillance, sélectionnez l'espace dans lequel la créer, puis cliquez sur Créer lorsque vous êtes prêt.

   La vue de surveillance apparaît.

3. La vue de surveillance affiche l'ensemble des tâches de données de tous les projets depuis le début.

   Utilisez les filtres pour créer une vue contenant les tâches à surveiller. Les listes de filtres incluront uniquement les ressources que vous êtes autorisé à énumérer.

   Les filtres suivants sont disponibles :

   • Projet

     Vous pouvez sélectionner tous les projets d'un ou de plusieurs espaces et/ou des projets individuels.

   • Type de tâche

   • Traçabilité des tâches

     Affiche la traçabilité des tâches en amont pour les tâches sélectionnées.

     Par exemple, vous pouvez sélectionner les mini-data warehouses de différents projets. Cela vous permet de surveiller l'ensemble des tâches de données en amont qui affectent les mini-data warehouses sélectionnés.

   • Impact des tâches

     Affiche toutes les tâches en aval affectées par les tâches sélectionnées.

     Par exemple, vous pouvez sélectionner une tâche de données de dépôt temporaire en état d'erreur. Cela vous permet de surveiller l'ensemble des tâches de données en aval affectées par la tâche de données de dépôt temporaire sélectionnée.

     Note ConseilVous pouvez combiner les filtres Traçabilité des tâches et Impact des tâches. Par exemple, vous pouvez surveiller l'ensemble des tâches de données qui se trouvent dans la traçabilité d'un mini-data warehouse sélectionné qui vous intéresse et qui sont impactées par une tâche de dépôt temporaire sélectionnée en état d'erreur.

   • Data gateway

     Affiche l'ensemble des tâches de données qui effectuent des opérations via une des passerelles Data Movement sélectionnées. Il peut s'agir des tâches suivantes :

     • Tâches qui déplacent des données, par exemple, des tâches de dépôt temporaire ou des tâches de réplication
     • Tâches qui extraient, chargent et transforment des données et qui sont exécutées sur une plateforme de données non directement accessible depuis Qlik Cloud. Les tâches de ce type peuvent être des tâches de stockage, de transformation, d'enregistrement et de mini-data warehouse.

     Sélectionnez N'utilise pas de passerelle de données pour afficher les tâches qui n'utilisent pas de passerelle de données. Il peut s'agir de n'importe quelle tâche ELT exécutée sur une plateforme de données directement accessible depuis Qlik Cloud.

     Note InformationsLes tâches associées à une passerelle supprimée ne correspondront plus au filtre Passerelle de données. Pour voir ces tâches, vous devez effacer la sélection du filtre Passerelle de données.

   • Cible/plateforme de données

     Affiche des tâches avec les plateformes de données sélectionnées (tâches de pipeline de données) ou les cibles sélectionnées (tâches de réplication).

   • Source

     Affiche des tâches de déplacement de données avec les sources de données sélectionnées. Les tâches de déplacement de données peuvent être n'importe quelles tâches suivantes, suivant le cas d'utilisation :

     • Cas d'utilisation de pipeline de données  : Tâches de dépôt temporaire
     • Cas d'utilisation de tâche de réplication : Tâches Appliquer l'opération Replicate aux données ou tâches Déposer temporairement les données dans un lac de données

   • Clusters du lakehouse

     Affichez les tâches de déplacement de données en cours d'exécution sur les clusters de lakehouses sélectionnés.

     Note InformationsLe filtre de clusters de lakehouses ne s'applique qu'aux projets Qlik Open Lakehouse.

   • Propriétaire

   Par exemple, sélectionnez un espace dans Projet sous Tous les projets dans des espaces :, et sélectionnez Dépôt temporaire dans Type de tâche. Cela crée une vue dans laquelle vous pouvez voir toutes les tâches de données de dépôt temporaire de tous les projets de l'espace sélectionné.

4. Lorsque vous êtes prêt, cliquez sur Enregistrer.

La vue de surveillance est maintenant créée et affiche toutes les tâches correspondant au filtre et dont l'état leur permet d'être exécutées. Cela signifie que les tâches à l'état Nouveau ou Prêt pour la préparation n'apparaissent pas dans la vue de surveillance. Si une tâche correctement préparée est modifiée et préparée avec des erreurs, la vue de surveillance affichera la version précédente exécutable.

Clonage d'une vue de surveillance

Vous pouvez également créer une vue de surveillance en clonant une vue de surveillance existante.

• Cliquez sur Enregistrer sous et enregistrez la vue sous un nouveau nom. Vous pouvez également sélectionner l'espace dans lequel enregistrer la vue.

Vous pouvez utiliser cette fonction, par exemple, pour :

• créer une vue de surveillance basée sur une autre vue ;

  ouvrir une vue de surveillance, modifier les filtres et l'enregistrer sous un autre nom ;

• déplacer une vue de surveillance vers un autre espace ;

  enregistrer la vue de surveillance sous le même nom dans un autre espace, puis supprimer la vue initiale.

Gestion des vues de surveillance

Pour afficher les vues de surveillance, accédez à Intégration de données >  Vues de surveillance.

Vous pouvez filtrer les vues de surveillance en fonction des Espaces et du Propriétaire de la vue de surveillance. Cliquez sur une vue de surveillance pour l'ouvrir.

• Pour modifier une vue de surveillance, cliquez sur ..., puis sur Modifier.

• Pour supprimer une vue de surveillance, cliquez sur ..., puis sur Supprimer.

Utilisation d'une vue de surveillance

La vue de surveillance affiche les propriétés suivantes pour toutes les tâches de données affichées avec le filtre utilisé.

• Nom de tâche

• Projet

• Source

  Affiche des tâches de déplacement de données avec les sources de données sélectionnées.

• Cible/plateforme de données

  Affiche des tâches avec les plateformes de données sélectionnées (tâches de pipeline de données) ou les cibles sélectionnées (tâches de réplication).

• Espace

• État

• Message

• Les données sont mises à jour au

  Les changements de source d'au moins une des sources de tâches sont appliqués jusqu'à la date en question.

• Jeux de données

• Jeux de données avec erreur

• Prochaine planification

• Cluster du lakehouse

  Note InformationsLe filtre de clusters de lakehouses ne s'applique qu'aux projets Qlik Open Lakehouse.

• Dernière exécution : Heure de début

• Dernière exécution : Durées

• Dernière exécution : Jeux de données

• Propriétaire

• Jeux de données traités

• Enregistrements traités

• Créé

• Modifié

• Actions

  Cette colonne contient un menu dans lequel vous pouvez effectuer une action telle que Exécuter ou Arrêter, suivant l'état de la tâche. Vous pouvez également accéder à la planification, puis directement au projet ou à la conception de tâches.

Sélection des colonnes à afficher

Vous pouvez personnaliser les colonnes à afficher en cliquant sur sur une colonne et en sélectionnant Colonnes affichées. Vous pouvez ensuite sélectionner les colonnes à afficher ou masquer.

Vous pouvez masquer une seule colonne en cliquant sur sur une colonne et en sélectionnant Masquer colonne.

Filtrage des tâches de données dans la vue de surveillance

Vous pouvez trier les tâches de données en cliquant sur un en-tête de colonne. Cliquez de nouveau sur l'en-tête pour passer de l'ordre de tri croissant à l'ordre de tri décroissant. Vous pouvez également cliquer sur sur une colonne et sélectionner Trier par ordre croissant ou Trier par ordre décroissant.

Pour appliquer un tri sur plusieurs colonnes, appuyez sur Maj ou sur Ctrl tout en sélectionnant des colonnes. Sur un appareil macOS, utilisez le bouton de commande (⌘).

Épinglage de colonnes

Vous pouvez épingler des colonnes à gauche ou à droite de la colonne pour qu'elles restent visibles lorsque vous faites défiler l'écran à l'horizontale.

• Cliquez sur sur une colonne et sélectionnez Épingler à gauche ou Épingler à droite.

Pour détacher une colonne épinglée, cliquez sur sur une colonne et sélectionnez Détacher.

Filtrage de tâches dans la vue de surveillance

Vous pouvez aussi cliquer sur ICP pour obtenir une vue d'ensemble rapide de l'état des tâches. Les ICP (Indicateurs clés de performance) peuvent être utilisés comme un filtre rapide. Les ICP suivants sont disponibles :

• Prêt pour l'exécution

  Cela inclut toutes les tâches non encore exécutées et les tâches qui ont été arrêtées avant la fin de leur exécution.

• Exécution en cours

• Terminé

  Cela inclut toutes les tâches dont la dernière exécution s'est effectuée correctement.

• Attention !

  Cela affiche toutes les tâches en état d'erreur ainsi que les tâches dont l'agent de passerelle est déconnecté.

Les états transitoires tels que Démarrage en cours sont inclus dans l'ICP le plus proche.

Affichage des détails d'une tâche de données

Vous pouvez afficher les détails d'une tâche de données.

1. Sélectionnez une tâche de données.

2. Cliquez sur Détails.

Vous pouvez afficher les détails suivants :

• Pipeline, pour voir une vue Pipeline du projet auquel la tâche de données appartient.

Vous pouvez également accéder à la vue de surveillance individuelle de la tâche de données sélectionnée en cliquant sur Ouvrir la surveillance des tâches.

• Pour plus d'informations sur la surveillance des tâches de dépôt temporaire individuelles, voir Dépôt temporaire de données à partir de sources de données.

• Pour plus d'informations sur la surveillance d'autres tâches de données, voir Surveillance d'une tâche de données individuelle.

Exécution de tâches de données

Vous pouvez exécuter des tâches de données dans la vue de surveillance.

1. Sélectionnez une ou plusieurs tâches dans la vue de surveillance.

   • Cliquez sur Exécuter pour exécuter les tâches sélectionnées.

   • Cliquez sur Arrêter pour arrêter les tâches sélectionnées.

Pour plus d'informations sur l'exécution de tâches de données, voir :

• Opérations sur la tâche de données de dépôt temporaire

• Opérations sur la tâche de données de stockage