Fluxo do Kinesis
Crie um fluxo do Amazon Kinesis para permitir que o Qlik capture e propague informações sobre o estado da instância de seus clusters de lakehouse.
Um fluxo do Kinesis é um serviço de streaming de dados em tempo real que permite a coleta, o processamento e a análise de dados conforme eles são gerados. Ele foi projetado para lidar com grandes volumes de dados de streaming com baixa latência, tornando-o adequado para monitoramento, análises e mensagens em tempo real entre componentes distribuídos.
Em uma implementação do Qlik Open Lakehouse, um fluxo do Kinesis é usado para coletar e compartilhar métricas de status e desempenho, como uso de CPU, consumo de memória e verificações de integridade, para cada instância no cluster do lakehouse.
As instâncias no cluster não se comunicam diretamente entre si. Em vez disso, elas pesquisam o fluxo do Kinesis para recuperar informações sobre seus pares. Esse mecanismo permite que as instâncias coordenem tarefas distribuídas, mantenham o conhecimento do estado umas das outras e possibilitem uma execução dimensionável e tolerante a falhas em todo o cluster.
Pré-requisitos
Certifique-se de ter criado a VPC, a sub-rede e as zonas de disponibilidade para hospedar seu Qlik Open Lakehouse.
Criando um fluxo Kinesis
Para criar um fluxo do Kinesis, faça o seguinte:
-
No Console da AWS, acesse Amazon Kinesis.
-
Em Fluxos de dados, clique em Criar fluxo de dados e configure-o:
-
Nome do fluxo de dados: digite o nome do seu fluxo.
-
Modo de capacidade: selecione a opção Provisionado.
-
Shards provisionados: certifique-se de que esse valor esteja definido como 1.
-
Clique em Criar fluxo de dados e anote o nome do fluxo.