Apresentando o Qlik Cloud Data Integration

Você pode fornecer dados prontos para consumo para o Qlik Cloud ou para armazéns de dados na nuvem, como Snowflake, Google Cloud BigQuery, e Azure Synapse Analytics com o Qlik Cloud Data Integration. As fontes de dados podem ser locais ou na nuvem. Os dados podem ser mantidos atualizados sem intervenção manual usando a CDC (Change Data Capture) ou tecnologias de lote, como carregamentos agendados. Você pode criar um pipeline de dados, realizar transformações adequadas a um propósito e criar datamarts.

Você pode acessar a página inicial do Qlik Cloud Data Integration selecionando Integração de Dados no menu do iniciador ().

Para obter mais informações sobre a arquitetura do Qlik Cloud Data Integration, consulte Arquitetura de conjunto de dados em um armazém de dados na nuvem.

Espaços de dados

Espaços de dados são áreas governadas do seu locatário do Qlik Cloud que são usados para criar e armazenar projetos de dados. Dentro do espaço, você também pode criar novas conexões de dados usando conectores e gerenciar o acesso aos gateways Data Movement. Todos os ativos de dados serão criados no espaço do projeto de dados ao qual pertencem.

Para obter mais informações, consulte Espaços de dados

Projetos de dados

Um projeto de dados é onde você cria seu pipeline de dados usando ativos de dados. O projeto de dados está associado a uma plataforma de dados usada como destino para todas as saídas. Você pode criar um pipeline linear simples ou um pipeline complexo consumindo várias fontes de dados e gerando muitas saídas.

Tarefa de dados

Uma tarefa de dados é a principal unidade de trabalho em um projeto de dados. Você pode criar tarefas de dados dos seguintes tipos em um projeto de dados. Além disso, você também pode fazer a aterrissagem e o armazenamento com uma única tarefa, Integrando dados.

• Aterrissagem

  Copie dados de uma fonte de dados para uma área de aterrissagem. As fontes de dados podem ser locais ou na nuvem. A área de aterrisagem pode ser um destino na nuvem ou um compartimento de dados do Amazon S3 (somente ao criar conjuntos de dados QVD).

  É possível manter os dados atualizados sem intervenção manual usando CDC ou executando carregamentos totais que estão programados para serem repetidos periodicamente.

  Aterrissagem de dados de fontes de dados

• Armazenamento

  Crie conjuntos de dados prontos para consumo em um data warehouse na nuvem, ou no Qlik Cloud, a partir dos dados copiados pela tarefa de dados de destino. Os conjuntos de dados podem ser mantidos atualizados com os dados de aterrissagem sem intervenção manual.

  Gerando e armazenando conjuntos de dados

• Transformar

  Crie transformações de dados reutilizáveis com base em regras e SQL personalizado como parte do seu pipeline de dados. Você pode realizar transformações em nível de linha e criar conjuntos de dados que são materializados como tabelas ou criados como exibições que realizam transformações em tempo real.

  Transformando dados

• Datamart

  Crie data marts para aproveitar suas tarefas de dados de Armazenamento ou tarefas de dados de Transformação. Você pode criar qualquer número de datamarts, dependendo das necessidades da sua empresa. Idealmente, seus datamarts devem conter repositórios de dados resumidos coletados para análise em uma seção ou unidade específica dentro de uma organização.

  Criando e gerenciando datamarts

Conexões de dados

Conexões de dados são usadas para permitir que as tarefas de dados acessem fontes de dados, armazenamento externo e plataformas de dados na nuvem para entrega de dados e transformações automáticas. Você pode se conectar por meio a conectividade nativa do Qlik Cloud ou por meio do Gateway de dados - Movimentação de dados.

As conexões de dados só podem ser atualizadas pelo proprietário da conexão.

Exibindo suas conexões de dados

Clique em Conexões no menu do lado esquerdo da página inicial do Qlik Cloud Data Integration para ver todas as suas conexões de dados.

• Você pode editar as conexões de dados que possui.

  Clique em ... e depois em Editar.

• Você pode testar uma conexão de dados.

  Clique em ... e depois em Testar conexão.

• Você pode excluir uma conexão de dados.

  Clique em ... e depois em Excluir.

Criando uma conexão de dados

Para criar uma nova conexão de dados, faça o seguinte:

• Clique em Adicionar novo na barra superior e clique em Conexão de dados.

• Clique em Criar novo, onde você seleciona uma conexão de dados.

• Clique em Criar conexão, onde as conexões de origem estão listadas.

• Clique em Criar conexão na exibição Conexões de dados.

Você precisará selecionar o tipo de fonte de dados e, em seguida, inserir o endereço e as informações de autenticação.

Veja também:

• Visão geral do Qlik Data Gateway - Movimentação de dados.
• Estabelecendo conexões com fontes de dados no Qlik Cloud Data Integration.