Flux Kinesis
Créez un flux Kinesis Amazon pour permettre à Qlik de capturer et de propager les informations sur l'état des instances à partir de vos clusters de lakehouse.
Un flux Kinesis est un service de diffusion en continu de données en temps réel qui permet la collecte, le traitement et l'analyse des données à mesure de leur génération. Il est conçu pour traiter de grands volumes de données diffusées en continu avec une faible latence, ce qui le rend adapté à la surveillance, à l'analyse et à la messagerie en temps réel entre composants distribués.
Dans un déploiement Qlik Open Lakehouse, un flux Kinesis est utilisé pour collecter et partager des métriques de statut et de performances telles que l'utilisation de l'UC, la consommation de mémoire et les contrôles d'intégrité, pour chaque instance au sein du cluster de lakehouse.
Les instances du cluster ne communiquent pas directement entre elles. Au lieu de cela, elles interrogent le flux Kinesis pour récupérer des informations sur leurs pairs. Ce mécanisme permet aux instances de coordonner les tâches distribuées, de connaître l'état des unes et des autres et de procéder à une exécution évolutive tolérante aux défaillances dans l'ensemble du cluster.
Conditions préalables requises
Assurez-vous d'avoir créé le VPC, le sous-réseau et les zones de disponibilité pour l'hébergement de votre Qlik Open Lakehouse.
Création d'un flux Kinesis
Pour créer un flux Kinesis, procédez comme suit :
-
Dans la Console AWS, accédez à Amazon Kinesis.
-
Dans Flux de données, cliquez sur Créer un flux de données et configurez-le :
-
Nom de flux de données : saisissez le nom de votre flux.
-
Mode de capacité : sélectionnez l'option Provisionné.
-
Shards (partitions) provisionnés : assurez-vous que cette valeur est définie sur 1.
-
Cliquez sur Créer un flux de données et notez le nom de flux.