Dati per l'analisi
La metrica Dati per l'analisi mostra la capacità utilizzata. Questo argomento spiega quali dati vengono conteggiati e quali sono esclusi. Descrive inoltre come viene calcolato l'utilizzo. Comprendere questi dettagli consente di visualizzare gli elementi che consumano la capacità di Qlik Cloud e di gestire i dati in modo più efficiente.
Dati inclusi nella metrica
La metrica Dati per l'analisi misura il volume totale dei dati caricati e archiviati nel proprio ambiente.
Dati conteggiati
La metrica include:
-
I dati caricati in Qlik Cloud da sorgenti esterne
-
I ricaricamenti aumentano il conteggio dei dati quando vengono aggiunti nuovi dati incrementali. Se un ricaricamento contiene meno dati rispetto a prima, il conteggio dei dati diminuisce di conseguenza.
-
I dati caricati in più tenant vengono conteggiati separatamente per ogni tenant.
-
I dati caricati una volta e utilizzati in più app nello stesso tenant vengono conteggiati una sola volta.
-
-
I file di dati caricati o creati in Qlik Cloud
-
Vengono conteggiate le dimensioni dei file caricati o creati.
-
Quando si copia un file di dati in Qlik Cloud, il nuovo file viene conteggiato nella metrica.
-
Quando si duplica un'app in uno spazio condiviso senza ricaricarla, l'operazione non aumenta il conteggio.
-
Come viene calcolata la metrica
La metrica Dati per l'analisi viene calcolata come:
-
Il volume di dati esterni acquisiti in Qlik Cloud tramite un'app Qlik Sense.
-
Le dimensioni del file QVD risultante determinate dal caricamento di dati esterni in Qlik Cloud tramite Qlik Data Gateway - Movimento dati.
-
Le dimensioni dei file per i file di dati caricati su Qlik Cloud.
-
La dimensione del file di un'app caricata come QVF, misurata come l'ingombro RAM di base dell'app.
Dati non conteggiati
I seguenti elementi non sono inclusi nella metrica:
-
Le app e i dati nello spazio personale di un utente. Ciò include qualsiasi app o dato caricato da qualsiasi sorgente o generato in uno spazio personale utilizzando la generazione di app On-Demand (ODAG).
-
La metrica si basa sulla posizione dell'app, non sulla posizione della relativa connessione dati: le app negli spazi personali non vengono conteggiate, anche se utilizzano una connessione in uno spazio condiviso; le app negli spazi condivisi vengono sempre conteggiate per la metrica.
-
-
Le app che eseguono solo il caricamento binario di un'altra app archiviata in Qlik Cloud. L'app originale è già conteggiata, quindi l'app di caricamento non viene aggiunta alla metrica.
-
Le app che caricano i dati solo dai file archiviati in Qlik Cloud (ad esempio, QVD). I file di origine sono già conteggiati separatamente.
-
Spazi e dati pubblicati negli spazi gestiti. Tuttavia, i ricaricamenti delle app negli spazi gestiti sono conteggiati nella metrica.
-
Dati caricati tramite Direct Query.
Sottoscrizione alla capacità di Dati per l'analisi
Sono disponibili sottoscrizioni a pacchetti di dati in base ai requisiti di Dati per l'analisi richiesti.
Ogni utente ha una certa quantità di capacità disponibile nel proprio spazio personale, oltre al volume incluso nella sottoscrizione. Questa quantità non viene conteggiata per il calcolo della metrica totale dei Dati per l'analisi.
L'edizione Starter di Qlik Cloud Analytics ha una capacità di dati fissa, con sottoscrizioni per questa edizione basati sul numero di utenti.
Spostamento dati in Qlik Cloud
Le opzioni disponibili per spostare i dati includono:
-
Connessioni dati dirette da Qlik Sense
-
Qlik Data Gateway - Accesso diretto
-
Spostamento di dati su Qlik Cloud con Qlik Talend Data Integration
Con le edizioni Premium ed Enterprise di Qlik Cloud Analytics, è possibile spostare i dati su Qlik Cloud da qualsiasi sorgente. L'edizione Standard consente di spostare i dati da qualsiasi sorgente eccetto SAP, mainframe e sorgenti legacy.
Calcolo del volume dei dati per l'analisi
Comprendere come vengono calcolati i dati per l'analisi può aiutare gli utenti a utilizzare la capacità in modo efficiente. Questa sezione spiega come vengono misurati il picco mensile, il caricamento dei dati, i ricaricamenti delle app e la creazione dei dati.
Utilizzo massimo mensile e giornaliero
Quando si acquista capacità per Dati per l'analisi, l'utilizzo viene misurato rispetto alla quantità acquistata. Ogni giorno, il sistema registra l'utilizzo, mentre il giorno con l'utilizzo più elevato durante il mese diventa il picco mensile, o livello massimo. Ad esempio, se si acquistano 250 GB di capacità e il picco mensile supera questo valore, potrebbero essere applicati costi aggiuntivi.
Metodo di monitoraggio dell'utilizzo giornaliero
L'utilizzo viene monitorato quotidianamente. Ogni giorno, il sistema calcola il picco giornaliero come il totale dei seguenti elementi:
-
La dimensione totale dei file archiviati
-
La quantità di dati ingeriti durante il ricaricamento dell'app.
-
La quantità di dati derivati o creati
Le app caricate in precedenza ma che non sono state ricaricate sono comunque incluse nell'utilizzo. Il sistema ne riporta i dati dall'ultimo ricaricamento finché non si verifica un nuovo ricaricamento o l'app viene eliminata.
Comportamento del riporto
Se un'app non viene ricaricata in un dato giorno, il sistema riporta i dati acquisiti dall'ultimo ricaricamento completato. L'app continua a contribuire la stessa quantità al picco giornaliero finché un nuovo ricaricamento non acquisisce un importo diverso, che aggiorna quindi l'utilizzo segnalato.
All'inizio di un nuovo mese, il picco mensile viene ripristinato. Tuttavia, il picco giornaliero per il primo giorno del nuovo mese potrebbe comunque includere il valore riportato dall'ultimo ricaricamento del mese precedente. Questo può far apparire più elevato l'utilizzo segnalato rispetto ai dati attualmente visibili nell'app.
Esempio:
-
Giorno 1: il tenant archivia 70 GB di file di dati e ingerisce 40 GB tramite il ricaricamento di un'app. Il picco giornaliero è di 110 GB.
-
Giorno 2: il tenant archivia 70 GB di file di dati e non si verifica alcun ricaricamento (0 GB ingeriti). Il picco giornaliero mostra ancora 110 GB perché vengono riportati i 40 GB ingeriti in precedenza. Solo un nuovo ricaricamento che ingerisce meno di 40 GB ridurrà questo valore.
Picco mensile e limite massimo
Il picco mensile è il picco giornaliero più alto registrato durante un mese. Agisce come limite massimo, mostrando il giorno singolo in cui l'utilizzo totale di dati è stato più elevato. Il picco mensile viene confrontato con la capacità acquistata per determinare se si applicano i costi di sovraccarico.
Esempio - Identificazione del picco mensile dall'utilizzo giornaliero
Per dimostrare come viene determinato il picco mensile, questo esempio utilizza uno scenario semplificato che copre solo quattro giorni e una capacità acquistata di 250 GB. I valori di utilizzo aiutano a illustrare come il picco giornaliero più alto diventi il picco mensile.
La tabella presenta l'utilizzo dei dati in quattro giorni, suddivisi per tipo:
| Giorno | Archiviati | Ricarica | Data di creazione | Picco giornaliero |
|---|---|---|---|---|
| 1 | 50 GB | 30 GB | 15 GB | 95 GB |
| 2 | 70 GB | 40 GB | 30 GB | 140 GB |
| 3 | 60 GB | 0 GB | 20 GB | 120 GB |
| 4 | 80 GB | 50 GB | 40 GB | 170 GB |
Comprensione dei dati della tabella:
-
Il giorno 3 non viene completato alcun ricaricamento dati. La porzione di ricaricamento del Giorno 2 (40 GB) viene riportata e contribuisce al picco giornaliero (120 GB).
-
Il giorno 4 ha il picco giornaliero più alto (170 GB), che diventa il picco mensile.
Poiché il picco mensile rientra nella capacità acquistata di 250 GB, non si applica alcuna eccedenza. Se l'utilizzo avesse superato i 250 GB in un qualsiasi giorno, potrebbero essere applicati dei costi di eccedenza o potrebbe essere richiesto un upgrade della capacità.
L'utilizzo giornaliero per quattro giorni, che mostra i dati archiviati, ingeriti e creati. La linea verde indica la capacità acquistata.

Caricamento dati in Qlik Cloud
I dati caricati in Qlik Cloud da sorgenti esterne vengono conteggiati ai fini del picco massimo giornaliero.
-
Se lo stesso set di dati viene caricato separatamente in più app, ogni caricamento viene conteggiato individualmente.
-
I dati caricati una volta in un tenant possono essere riutilizzati da più app all'interno di tale tenant senza essere conteggiati di nuovo. Per evitare conteggi multipli, considerare di caricare i dati una volta nei file QVD e fare in modo che più app li leggano da tali QVD.
-
I dati caricati in più tenant vengono conteggiati separatamente per ogni tenant.
Come i dati contribuiscono al picco giornaliero:
-
I dati basati su file caricati tramite le app: vengono misurati in base alle dimensioni dei file.
-
I ricaricamenti di app che utilizzano query o connettori: vengono conteggiati come il numero massimo di byte acquisiti da una sorgente dati. Se si verificano più ricaricamenti nello stesso giorno, solo il ricaricamento più grande viene conteggiato per il picco giornaliero.
Esempio: Un'app si ricarica tre volte con 0,75 GB, 1,25 GB e 1 GB in un giorno. Per il picco giornaliero vengono conteggiati solo 1,25 GB.
Nota informaticaUna volta che un ricaricamento viene conteggiato, rimane parte del picco giornaliero anche se l'app viene eliminata più tardi quello stesso giorno. Il numero massimo di byte acquisiti viene conteggiato finché l'app esiste nel tenant. -
I dati caricati in Qlik Cloud tramite Qlik Data Gateway - Movimento dati: vengono misurati in base alle dimensioni del file QVD risultante.
-
Le app che vengono caricate o caricate utilizzando l'importazione di file tramite il centro attività Analisi o qlik-cl: vengono misurate in base alle dimensioni statiche in byte dell'app.
-
File QVD caricati: vengono misurati in base alle dimensioni file.
I dati possono essere caricati in Qlik Cloud in differenti modi: tramite le app, lo spostamento dei dati o l'importazione utilizzando il centro attività Analisi o qlik-cli.
Negli esempi illustrati di seguito, i dati non sono inclusi nel conteggio ai fini dell'utilizzo massimo giornaliero:
-
I dati caricati nello spazio personale di un utente non vengono conteggiati, se sono limitati a quello spazio. Se l'utente sposta i dati in uno spazio condiviso per collaborare con altri utenti, i dati verranno conteggiati.
-
Se un ricaricamento non viene completato, i byte acquisiti non vengono conteggiati. Tuttavia, qualsiasi file QVD risultante viene conteggiato.
-
Quando si carica un'app con dati che risiedono già in Qlik Cloud, i dati caricati non vengono conteggiati. Per esempio, le app copiate o con caricamento binario (cioè che caricano i dati da un'altra app Qlik Sense) non hanno alcun impatto sull'utilizzo massimo giornaliero, a condizione che non siano ricaricati da una sorgente esterna.
I ricaricamenti di app da sorgenti esterne non hanno alcun impatto sull'utilizzo massimo giornaliero.
Misurazione dei byte acquisiti per i ricaricamenti di app
Quando si ricarica un'app Qlik Sense da una sorgente esterna, si applica quanto segue:
-
È possibile ricaricare un'app più volte dallo stesso set di dati di origine senza alcun impatto sull'utilizzo massimo giornaliero, a condizione che il volume di dati rimanga invariato.
-
Se le dimensioni del set di dati di origine aumentano, queste hanno un impatto sull'utilizzo massimo giornaliero. Ogni ulteriore GB di dati che viene aggiunto al set di dati contribuisce in misura equivalente ai dati acquisiti durante il ricaricamento.
-
Per contro, se le dimensioni del set di dati di origine diminuiscono, la riduzione viene riflessa anche nel conteggio dell'utilizzo massimo giornaliero.
Esempio: Se le dimensioni del set di dati vengono ridotte di 0,25 GB, le dimensioni di ricaricamento diminuiscono della stessa quantità. Tuttavia, se un ricaricamento di 1 GB si verifica precedentemente durante la giornata, l'utilizzo massimo giornaliero rimane di 1 GB. La riduzione viene riflessa nel picco massimo giornaliero solo il giorno successivo.
-
Le modifiche nel contenuto del set di dati di origine che non ne modificano le dimensioni, non hanno alcun impatto sull'utilizzo massimo giornaliero. Solo il volume di dati ha effetto sul picco massimo giornaliero.
Misurazione dei byte acquisiti quando vengono modificati le dimensioni o il contenuto del set di dati di origine.
-
Se si eseguono più query sullo stesso set di dati utilizzando un unico script di caricamento, ogni query viene conteggiata separatamente. Il volume totale dei dati è la somma di tutte le query.
Esempio: Se si dispone di uno script di caricamento che include tre query di un 1 GB ciascuna dallo stesso set di dati, ogni query viene conteggiata individualmente. Quindi, i dati totali conteggiati ai fini del picco massimo giornaliero sono pari a 3 GB.
-
Il caricamento di un'app e l'eliminazione successiva della tabella non riducono l'utilizzo massimo giornaliero, poiché quest'ultimo si basa sulle dimensioni di ricaricamento massime dell'app per quel giorno.
-
Se si carica un'app e quindi si elimina lo stesso giorno, questa verrà comunque conteggiata ai fini del picco massimo giornaliero perché era presente quel giorno. Il giorno successivo, l'app non esiste più e non contribuisce al picco giornaliero.
Misurazione dei byte acquisiti per differenti scenari di ricaricamento di app.
Misurazione dei dati caricati nei file QVD con Qlik Talend Data Integration
Quando si caricano dati in un file QVD da una sorgente esterna utilizzando Qlik Data Gateway - Movimento dati, si applica quanto segue:
-
Il caricamento, l'importazione o la generazione di un set di dati più volte non ha alcun impatto sul picco massimo giornaliero, a condizione che il volume di dati rimanga invariato.
-
Se le dimensioni del set di dati di origine aumentano, queste hanno un impatto sull'utilizzo massimo giornaliero. Ogni ulteriore GB di dati aggiunto contribuisce in misura equivalente alle dimensioni del file QVD risultante.
-
Se le dimensioni di un file QVD cambiano durante il giorno, vengono registrate le dimensioni massime raggiunte. Il picco giornaliero riflette sempre le dimensioni massime osservate per quel giorno.
-
Se le dimensioni del set di dati di origine diminuiscono, la riduzione viene riflessa anche nel conteggio del picco massimo giornaliero.
Esempio: Una riduzione di 0,25 GB nel set di dati riduce le dimensioni del file QVD della stessa quantità.
-
Le modifiche nel contenuto del set di dati che non ne cambiano le dimensioni non hanno alcun impatto sul picco massimo giornaliero. Solo il volume di dati ha effetto sul picco massimo giornaliero.
Misurazione delle dimensioni del file QVD quando vengono modificati le dimensioni o il contenuto del set di dati di origine.
Caricamento di app da sorgenti esterne e interne
Il modo in cui i dati caricati nelle app influisce sul picco giornaliero dipende dalla sorgente. I seguenti scenari mostrano il modo in cui contribuiscono tipi diversi di dati.
-
Un'app viene caricata da una sorgente esterna
I dati caricati da una sorgente esterna vengono conteggiati come numero di byte acquisiti.
Esempio: se vengono caricati 10 GB, l'app contribuisce con 10 GB al picco giornaliero.
-
Un'app viene caricata da un file QVD in Qlik Cloud
Il caricamento dei dati da un file QVD archiviato in Qlik Cloud non viene conteggiato come acquisizione esterna per l'app.
Esempio: se l'app carica 10 GB da un file QVD, l'app contribuisce con 0 GB. Il file QVD contribuisce con 10 GB separatamente.
-
Un nuovo file QVD è generato da un QVD in Qlik Cloud
Quando un'app generatrice di file QVD carica i dati da un file QVD esistente in Qlik Cloud, l'app contribuisce con 0 GB. Il file QVD risultante viene conteggiato.
Esempio: se un file QVD da 10 GB viene trasformato in un nuovo file QVD da 5 GB, il contributo totale al picco giornaliero è di 15 GB.
-
Un'app viene caricata da una sorgenti esterne e interne
Se un'app carica 10 GB da una sorgente esterna e 5 GB da un QVD in Qlik Cloud, solo i 10 GB dell'ingestione esterna vengono conteggiati per l'app. Il file QVD contribuisce con i suoi 5 GB separatamente, quindi il contributo totale al picco giornaliero è di 15 GB.
La misurazione dei file di dati totali più i dati acquisiti durante il caricamento da sorgenti interne ed esterne.
Creazione di dati in Qlik Cloud
Quando si creano nuovi dati in Qlik Cloud, sia copiando file di dati o derivandoli tramite la combinazione e l'elaborazione di dati non elaborati esistenti, questi vengono conteggiati ai fini del picco massimo giornaliero. I dati vengono misurati come le dimensioni totali dei file generati durante il processo di creazione. I dati creati vengono conteggiati solo una volta, indipendentemente dal numero di app che li utilizzano.
Esempi:
-
La creazione di un file QVD di 1 GB file che utilizza l'istruzione STORE aggiunge 1 GB ai fini dell'utilizzo massimo giornaliero.
-
La copia di un file QVD di 1 GB aggiunge 1 GB ai fini dell'utilizzo massimo giornaliero, poiché entrambi contribuiscono al totale.
-
La creazione di un file QVD di 0,5 GB mediante una trasformazione aggiunge 0,5 GB ai fini dell'utilizzo massimo giornaliero. Viene conteggiato solo il file QVD; l'app per la generazione di QVD non viene conteggiata, poiché carica i dati che sono già in Qlik Cloud.
Misurazione dei file di dati creati in Qlik Cloud.
Procedure consigliate per la gestione dei dati
Una gestione efficace dei dati aiuta a ottenere il massimo valore dalla capacità di Dati per l'analisi. Le raccomandazioni seguenti illustrano come ottimizzare il caricamento dei dati, ridurre l'archiviazione non necessaria e a gestire i contenuti meno recenti o inattivi in Qlik Cloud.
Creazione di file QVD per il riutilizzo di dati
Utilizzare i file QVD quando i dati sono condivisi tra più app. Caricare i dati esterni una sola volta e archiviarli nel formato QVD riduce l'ingestione ripetuta e aiuta a mantenere più basso il picco giornaliero. L'utilizzo di file QVD per il riutilizzo dei dati con Qlik Data Gateway - Movimento dati in genere è più efficiente rispetto al ricaricamento dei dati direttamente nelle app.
Esempio:
Se si caricano 10 GB di dati esterni una sola volta e si archiviano come file QVD da 5 GB, il totale dei dati conteggiati per il picco giornaliero è di 15 GB. Le app che caricano il file QVD da 5 GB non re-ingeriscono i 10 GB originali. Se invece si caricano gli stessi 10 GB di dati esterni direttamente in due app, l'ingestione avviene due volte, quindi verranno conteggiati 20 GB come risultato.
È più efficiente creare un file QVD e caricarne i dati in più app che caricare i dati esterni direttamente in ogni app.
Utilizzo di metodi di caricamento di dati efficienti
Applicare filtri e trasformazioni alla sorgente dati (pushdown SQL) per ridurre i dati trasferiti durante i ricaricamenti.
Esempio:
in questa query, il filtro viene applicato nella sorgente in modo che venga trasferito solo un sottoinsieme dei dati.
Utilizzo di app on-demand per i set di dati di grandi dimensioni
La generazione di app on-demand (ODAG) consente di lavorare con set di dati di grandi dimensioni caricando prima i dati aggregati e recuperando i sottoinsiemi dettagliati solo quando necessario.
Per ulteriori informazioni, vedere App On-demand.
Gestione di set di dati di grandi dimensioni con Direct Query e le viste dinamiche
Direct Query e le viste dinamiche consentono di eseguire query sui set di dati di grandi dimensioni on-demand senza caricare tutti i dati in memoria. Eseguendo le query solo sui dati necessari, questi approcci riducono l'ingestione e aiutano a mantenere l'utilizzo entro la capacità disponibile.
Per ulteriori informazioni, vedere:
Gestione delle app obsolete o non utilizzate
Le app nel tenant continuano a contribuire all'utilizzo dei dati per l'analisi in base all'ultimo ricaricamento completato. Finché un'app è presente con i dati caricati, contribuisce al reporting sulla capacità.
Per evitare un utilizzo non necessario:
Ridurre o rimuovere i dati non necessari
Rimuovere i dati dalle app che non richiedono più set di dati completi o creare app senza i dati quando è necessario mantenere solo la struttura. Il ricaricamento di un'app con un set di dati più piccolo aggiorna l'utilizzo registrato.
Evitare duplicazioni inutili
Copiare le app solo quando necessario. Ogni copia è trattata come un'app separata e contribuisce all'utilizzo della capacità.
Utilizzare gli spazi condivisi in modo consapevole
Gli spazi condivisi possono aiutare a controllare dove e come avvengono i ricaricamenti.
Eliminare le app che non servono più
Una pulizia regolare impedisce ai contenuti obsoleti di consumare capacità.
-
Identificare gli elementi inutilizzati nel Catalogo controllando Ultimo aggiornamento, Visualizzato da e Utilizzato in.
-
Utilizzare l'analisi dell'impatto e la derivazione per capire dove vengono usati i file di dati.
-
Eliminare le app e i file di dati inutilizzati dai centri attività. Gli amministratori possono anche eliminare le app da Amministrazione.
Per ulteriori informazioni, vedere:
Riduzione del consumo legato ai processi di ricaricamento
Le dimensioni dei ricaricamenti segnalate per un'app diminuiscono solo se il ricaricamento genera un set di dati più piccolo. Per ridurre le dimensioni riportate, ricaricare l'app con meno dati in modo che le dimensioni segnalate vengano aggiornate.
Comportamento di ricaricamento delle app
-
Ricaricamento senza nuovi dati:
se un'app viene ricaricata senza aggiungere nuovi dati, le dimensioni riportate rimangono le stesse.
Esempio: un'app si ricarica con lo stesso set di dati che aveva in precedenza. L'utilizzo segnalato non cambia perché non sono stati acquisiti dati aggiuntivi o di dimensioni inferiori.
-
App svuotata dopo l'acquisizione:
anche se un'app elimina tutte le tabelle, lasciando vuoto il modello dati, l'ultima acquisizione riuscita contribuisce comunque all'utilizzo giornaliero.
Esempio: un'app acquisisce 10 GB di dati esterni, genera file QVD ed elimina tutte le tabelle alla fine dello script. L'app è ora vuota, ma i 10 GB acquisiti contano comunque per l'utilizzo giornaliero.
-
Copia di app in un altro spazio:
quando un'app viene copiata in un altro spazio, viene trattata come un'app separata e conteggiata nuovamente per l'utilizzo della capacità.
Approcci per limitare il consumo legato ai ricaricamenti
È possibile ridurre il consumo di dati correlato al ricaricamento utilizzando uno dei due metodi seguenti. Entrambi i metodi rimuovono i dati dall'app.
-
Interruzione anticipata dello script di caricamento: aggiungere un'istruzione Exit script; all'inizio dello script di caricamento per ricaricare l'app senza dati. Quando sono necessari tutti i dati, commentare l'istruzione o applicare una condizione in modo che venga eseguita solo in scenari specifici (ad esempio, quando l'app si trova in uno spazio particolare).
-
Ricreare l'app senza dati: scaricare l'app senza dati e importarla come nuova app. Dopo aver convalidato la nuova versione, eliminare l'app originale.