Dados para análise

Você assina pacotes de dados com base nos seus requisitos de Dados para análise. Cada usuário tem uma determinada quantidade de capacidade de Dados para análise disponível em seu espaço pessoal. Esses dados pessoais não são contabilizados no volume total de Dados para análise. No entanto, se o usuário mover os dados para um espaço compartilhado para colaboração, eles serão incluídos na capacidade total.

A edição Starter do Qlik Cloud Analytics tem uma capacidade de dados fixa. Nesta edição, as assinaturas são baseadas no número de usuários.

Calculando o volume de Dados para análise

Entender como os Dados para análise são calculados pode ajudar você a usar sua capacidade de forma eficiente. Esta seção explica como o pico mensal, o carregamento de dados, as recargas de aplicativos e a criação de dados são medidos.

Pico mensal

Ao adquirir a capacidade de Dados para análise, você recebe um conjunto de dados para armazenar e analisar dados. Essa capacidade é um limite máximo, não um crédito consumível. Por exemplo, se você comprar 250 GB de capacidade, poderá armazenar e analisar até 250 GB de dados a qualquer momento. Se você exceder esse limite, poderão ocorrer excedentes, que serão rastreados separadamente.

Como o uso diário é monitorado

Seu uso é monitorado diariamente. A cada dia, o sistema calcula seu pico diário como o total de

• O tamanho total dos arquivos armazenados

• A quantidade de dados ingeridos durante as recargas do aplicativo

• A quantidade de dados derivados ou criados

Comportamento de transporte

Se não houver recarregamento em um determinado dia, o sistema transportará o valor de dados ingeridos do recarregamento mais recente. No início de um novo mês, o pico mensal é reiniciado. Se não houver recarga no primeiro dia do novo mês, o último valor de recarga do mês anterior será aplicado a esse dia.

Os dados armazenados e os dados derivados são sempre medidos diariamente, sem transferência.

Casos especiais

• O valor de uso reflete a última recarga bem-sucedida de cada aplicativo. Se um aplicativo for recarregado posteriormente com um modelo de dados vazio (por exemplo, apenas para criar e exportar arquivos QVD), o uso relatado ainda poderá mostrar o tamanho da última recarga bem-sucedida.

• O valor de uso é atualizado apenas quando o aplicativo é recarregado novamente. Isso pode causar diferenças entre os dados visíveis no aplicativo e o uso relatado de Dados para análise. Para reduzir o uso relatado, recarregue o aplicativo com um conjunto de dados menor.

Exemplos de transporte

Os exemplos a seguir mostram como os valores de recarga são transportados quando não ocorre uma nova recarga e como esse comportamento interage com os dados armazenados e criados.

Exemplo 1 – Transporte regular:

• Dia 1: 70 GB de arquivos de dados armazenados, 40 GB de recargas de aplicativos, 30 GB de arquivos de dados criados. O pico diário é de 140 GB.

• Dia 2: 60 GB de arquivos de dados armazenados, 0 GB de recargas de aplicativos, 20 GB de arquivos de dados criados. O valor de recarga do Dia 1 (40 GB) é mantido. O pico diário é de 120 GB.

Exemplo 2 – Cenário de aplicativo somente de QVD

• Dia 1: Recarregar o aplicativo com 10 GB de dados externos, criar arquivos QVD, eliminar todas as tabelas. O modelo final do aplicativo está vazio. O pico diário é de 10 GB (parte de recarga).

• Dia 2: Não ocorre recarga. O pico diário permanece em 10 GB (a parte de recarga é transferida), embora o aplicativo agora não tenha tabelas.

Somente uma nova recarga atualiza esse valor.

Isso significa que o pico diário pode refletir tanto dados de recarga transportados (mesmo se o aplicativo em si estiver vazio, como no cenário somente QVD) quanto quaisquer novos dados armazenados ou criados para aquele dia.

Pico mensal e marca d'água alta

O pico mensal é o maior pico diário registrado durante o mês. Ele funciona como uma marca d'água alta, mostrando o único dia em que seu uso total de dados foi mais alto. O pico mensal é comparado com a capacidade adquirida para determinar se há cobrança de excedente.

Exemplo – Identificando o pico mensal a partir do uso diário

Para demonstrar como o pico mensal é determinado, este exemplo usa um cenário simplificado que abrange apenas quatro dias e uma capacidade comprada de 250 GB. Os valores de uso ajudam a ilustrar como o pico diário mais alto se torna o pico mensal.

A tabela de dados apresenta o uso de dados em quatro dias, categorizados por tipo:

Compreendendo os dados da tabela:

• O 3º dia não tem recarga de dados. A parte de recarga do Dia 2 (40 GB) é transportada e contribui para o pico diário (120 GB).

• O 4º dia tem o maior pico diário (170 GB), que se torna o pico mensal.

Como o pico mensal está dentro da capacidade adquirida de 250 GB, não se aplica nenhum excedente. Se o uso tiver excedido 250 GB em qualquer dia, poderão ser aplicadas taxas de excesso ou poderá ser necessário um upgrade de capacidade.

Carregando dados no Qlik Cloud

Dados carregados no Qlik Cloud provenientes de fontes externas contam para o pico diário. Quando você carrega dados em um locatário, eles são contados uma vez e podem ser analisados e usados diversas vezes. Os dados carregados em vários locatários são contados várias vezes.

Os dados que contribuem para o pico diário são medidos da seguinte forma:

• Dados baseados em arquivo carregados por meio de um aplicativo Qlik Sense são medidos pelo tamanho do arquivo.

• Recarregamentos de aplicativos usando consultas ou conectores são contados como o máximo de bytes ingeridos da fonte de dados. Quando há vários recarregamentos acontecendo no mesmo dia, o maior tamanho do aplicativo é aquele que será contado para o pico diário. Por exemplo, se um aplicativo for recarregado durante um dia com 0,75 GB, 1,25 GB e 1 GB, respectivamente, o valor usado para esse dia será 1,25 GB.

  Enquanto existir um aplicativo no locatário do Qlik Cloud, os bytes máximos ingeridos serão avaliados para o aplicativo.

• Dados carregados no Qlik Cloud por meio do Qlik Data Gateway - Movimentação de dados são medidos pelo tamanho do arquivo QVD resultante.

• Os aplicativos que são carregados por meio de importação de arquivos, seja no centro de atividades do Análises ou usando a qlik-cli, são medidos pelo tamanho de bytes estáticos do aplicativo.

• Os arquivos QVD carregados são medidos pelo tamanho do arquivo.

Nas seguintes situações, os dados não são incluídos no cálculo do pico diário:

• Os dados carregados no espaço pessoal de um usuário não são contados, desde que estejam restritos a esse espaço. Se o usuário mover os dados para um espaço compartilhado para colaborar com outras pessoas, eles serão contabilizados.

• Se um recarregamento falhar, os bytes ingeridos não serão contados. No entanto, quaisquer arquivos QVD resultantes serão contados.

• Quando você carrega um aplicativo com dados que já no Qlik Cloud, o carregamento de dados não é contado. Por exemplo, aplicativos copiados ou carregados binários (carregando dados de outro aplicativo Qlik Sense) não afetam o pico diário, desde que não sejam recarregados de uma fonte externa.

Medindo bytes ingeridos para recarregamentos de aplicativos

O seguinte é aplicável quando você recarrega um aplicativo Qlik Sense de uma fonte externa:

• Você pode recarregar um aplicativo diversas vezes do mesmo conjunto de dados de origem sem afetar o pico diário, desde que o volume de dados permaneça inalterado.

• Se o conjunto de dados de origem aumentar de tamanho, o pico diário será afetado. Cada GB adicional de dados adicionados ao conjunto de dados contribui com uma quantidade equivalente para os dados ingeridos durante o recarregamento.

• Por outro lado, se o tamanho do conjunto de dados de origem diminuir, essa redução também se refletirá no pico diário. Por exemplo, se o tamanho do conjunto de dados for reduzido em 0,25 GB, o tamanho de recarregamento diminuirá na mesma proporção. No entanto, se um recarregamento de 1 GB ocorresse no início do dia, o pico diário desse dia seria de 1 GB. A redução apenas se refletiria no pico diário do dia seguinte.

• Alterações no conteúdo do conjunto de dados de origem, sem alterar seu tamanho, não afetam o pico diário. O pico diário é afetado apenas pelo volume de dados.

• Se você consultar o mesmo conjunto de dados diversas vezes em um único script de carregamento, todas essas consultas serão contadas separadamente, e seus volumes de dados serão somados. Por exemplo, se você tiver um script de carregamento que inclua três consultas de 1 GB cada do mesmo conjunto de dados, todas as três consultas serão contadas individualmente. Portanto, o total de dados contados para o seu pico diário será de 3 GB.

• Carregar um aplicativo e, mais tarde, descartar a tabela não reduz o pico diário, pois este é baseado no tamanho máximo de recarregamento do aplicativo naquele dia.

• Se você carregar um aplicativo e excluí-lo no mesmo dia, ele ainda contribuirá para o pico diário daquele dia. No entanto, isso reduz o pico diário do dia seguinte, quando o aplicativo não existir mais.

Medindo dados carregados em arquivos QVD com o Qlik Talend Data Integration

O seguinte é aplicável quando você carrega dados em um arquivo QVD de uma fonte externa usando o Qlik Data Gateway - Movimentação de dados:

• Você pode fazer upload, importar ou gerar um conjunto de dados diversas vezes sem afetar o pico diário, desde que o volume de dados permaneça inalterado.

• Se o conjunto de dados de origem aumentar de tamanho, o pico diário será afetado. Cada GB adicional de dados adicionados ao conjunto de dados contribui com uma quantidade equivalente para o tamanho do arquivo QVD resultante.

• Por outro lado, se o tamanho do conjunto de dados de origem diminuir, essa redução também se refletirá no pico diário. Por exemplo, se o tamanho do conjunto de dados for reduzido em 0,25 GB, o tamanho do arquivo QVD resultante diminuirá na mesma proporção.

• Alterações no conteúdo do conjunto de dados de origem, sem alterar seu tamanho, não afetam o pico diário. O pico diário é afetado apenas pelo volume de dados.

Carregando aplicativos de fontes externas e internas

É importante entender como os dados carregados nos aplicativos afetam o pico diário, dependendo da fonte de dados. Vamos considerar os seguintes cenários em que os dados são carregados de diferentes fontes.

• Um aplicativo é carregado de uma fonte externa

  Quando você carrega dados de uma fonte externa em um aplicativo, eles contam como bytes ingeridos. Por exemplo, se você carregar 10 GB, a contribuição para o pico diário será de 10 GB.

• Um aplicativo é carregado de um QVD no Qlik Cloud

  Carregando dados em um aplicativo a partir de um arquivo QVD que reside no Qlik Cloud não conta para o pico diário. Se 10 GB de dados forem carregados em um aplicativo a partir do QVD, os dados não serão contados, pois não há ingestão de dados externos. A contribuição para o pico diário será de 0 GB.

• Um novo arquivo QVD é gerado a partir de um QVD no Qlik Cloud

  Os dados carregados em um aplicativo gerador de QVD a partir de um QVD baseado no Qlik Cloud não são contabilizados no pico diário. No entanto, o arquivo QVD resultante gerado pelo aplicativo conta. Por exemplo, se um arquivo QVD de 10 GB for transformado em um novo QVD de 5 GB, a contribuição para o pico diário será a soma dos dois arquivos, que será de 15 GB. Como não há ingestão de dados externos, a carga do aplicativo gerador de QVD (um aplicativo dedicado que cria um modelo de dados e gera um QVD) não é contabilizada.

• Um aplicativo é carregado de fontes externas e internas

  Se um aplicativo carregar 10 GB de uma fonte externa e 5 GB de um QVD dentro do Qlik Cloud, a contribuição total para o pico diário do aplicativo será de 10 GB, pois apenas os dados carregados da fonte externa são contabilizados.

Criando dados no Qlik Cloud

Quando você cria novos dados no Qlik Cloud, seja copiando arquivos de dados ou derivando-os através da combinação e processamento de dados brutos existentes, eles contam para o pico diário. Os dados são medidos como o tamanho total dos arquivos gerados durante o processo de criação de dados. Os dados criados são contados apenas uma vez, independentemente de quantos aplicativos os utilizam.

Considere estes exemplos de criação de dados:

• A criação de um arquivo QVD de 1 GB usando a instrução STORE adiciona 1 GB ao pico diário.

• Copiar um arquivo QVD de 1 GB adiciona 1 GB ao pico diário, pois ambas as cópias contribuem para o total.

• A criação de um arquivo QVD de 0,5 GB por meio da transformação adiciona 0,5 GB ao pico diário. Somente o arquivo QVD resultante é contado. O aplicativo gerador de QVD não é contado porque carrega dados que já estão no Qlik Cloud.