Monitoraggio dell'attività di archiviazione di Qlik Open Lakehouse

L'attività di archiviazione nei progetti Qlik Open Lakehouse differisce da altri progetti in quanto viene eseguita continuamente, anziché in modalità batch. Di conseguenza, le metriche di monitoraggio sono diverse.

Panoramica generale del monitoraggio

La vista di monitoraggio consente di tracciare lo stato dell'attività e le metriche:

• Schede

  Passare tra Info, Caricamento completo e Elaborazione delle modifiche per visualizzare le metriche pertinenti per ciascuna fase dell'attività.

• Filtro dello stato del dataset

  Un grafico a barre sopra la tabella dei dataset mostra quanti dataset si trovano in ciascuno stato: In coda, In caricamento, Completato ed Errore. Il grafico viene aggiornato dinamicamente al variare degli stati del dataset. Fare clic su un segmento di stato per filtrare la tabella dei dataset in modo da mostrare solo i dataset in quello stato.

• Nascondi widget

  Fare clic Nascondi widget per comprimere i widget delle metriche. Ciò offre più spazio per visualizzare la tabella dei dataset sottostante.

• Data di inizio

  La data e l'ora in cui è avviata l'esecuzione dell'attività corrente.

• Data di fine

  La data e l'ora in cui è terminata l'esecuzione dell'attività. Questo dato viene visualizzato solo per le esecuzioni dell'attività completate.

• Cronologia esecuzioni

  Fare clic su Cronologia esecuzioni per visualizzare un elenco delle esecuzioni precedenti dell'attività e i relativi risultati.

Dettagli di monitoraggio Info

La sezione Info fornisce un riepilogo dello stato generale dell'attività:

• Esecuzione

  Visualizza l' ID esecuzione dell'esecuzione corrente.

• Dati

  L'attività dati è aggiornata a visualizza l'ora a cui è aggiornata la vista più vecchia. Rappresenta l'ultimo punto nel tempo in cui tutte le modifiche di origine confermate fino a quel momento sono già disponibili nelle tabelle di destinazione.

  Se non vengono rilevate nuove modifiche all'origine, questo valore viene impostato sull'ora corrente.

• Attività

  Visualizza il nome e lo stato del cluster su cui è in esecuzione questa attività, nonché le informazioni generali e lo stato dell'attività.

Dettagli di monitoraggio del caricamento completo

È possibile visualizzare le seguenti statistiche per l'attività dati in Caricamento completo:

• Dataset totali

  Il numero di dataset caricati.

• Dataset in errore

  Il numero di dataset in errore.

• Modifiche in entrata

  Il numero di modifiche in entrata.

• Latenza totale

  Latenza corrente dell'attività (hh:mm:ss). Questa durata rappresenta il tempo che intercorre tra la disponibilità della modifica nell'origine e l'applicazione e la disponibilità della modifica nella destinazione.

È possibile visualizzare i seguenti dettagli per ciascuna tabella nell'attività dati:

• Nome

  Il nome della tabella di destinazione.

• Stato

  Lo stato della tabella sarà uno dei seguenti: In coda, In caricamento, Completato o Errore.

• Avviato

  L'ora in cui è iniziato il caricamento.

• Terminato

  L'ora in cui è terminato il caricamento.

• Durata

  Durata del caricamento nel formato hh:mm:ss.

• Record

  Il numero di record che sono stati replicati durante il caricamento.

• Messaggio

  Visualizza un messaggio di errore se il caricamento non è stato elaborato correttamente.

Dettagli di monitoraggio dell'elaborazione delle modifiche

È possibile visualizzare i seguenti dettagli per l'attività dati per monitorare l'elaborazione delle modifiche in Elaborazione delle modifiche:

• Dataset totali

  Il numero di dataset caricati.

• Dataset in errore

  Il numero di dataset in errore.

• Modifiche in entrata

  Il numero di modifiche in entrata.

• Modifiche elaborate

  Il numero di modifiche elaborate.

• Latenza totale

  Latenza corrente dell'attività (hh:mm:ss). Questa durata rappresenta il tempo che intercorre tra la disponibilità della modifica nell'origine e l'applicazione e la disponibilità della modifica nella destinazione.

È possibile visualizzare i seguenti dettagli per ciascuna tabella nell'attività dati:

• Nome

  Il nome della tabella di destinazione nell'asset di trasferimento.

• Stato

  Lo stato della tabella sarà uno dei seguenti: Accumulo modifiche o Errore.

• Modifiche in entrata

  Il numero di modifiche elaborate dall'attività di trasferimento in attesa di essere applicate dall'attività di archiviazione.

• Modifiche elaborate

  Il numero totale di modifiche applicate alla destinazione dall'ultimo caricamento completo del dataset (tramite il caricamento completo iniziale o l'azione di ricaricamento).

• Ultima elaborazione

  L'ora degli ultimi dati di origine inseriti nel dataset di destinazione, convertita nell'ora locale.

• Modifiche non ottimizzate

  Numero di record interrogabili tramite la vista, ma non ancora uniti in partizioni Iceberg ottimizzate. Valori elevati possono influire sulle prestazioni fino al completamento delle ottimizzazioni in background.

  Questo riflette il numero di record attualmente nella partizione delle modifiche che non sono ancora stati applicati alle partizioni corrente o cronologia.

  Se questo numero è costantemente elevato, considerare l'aumento della capacità di calcolo del cluster per accelerare l'ottimizzazione.

• Messaggio

  Visualizza un messaggio di errore se le modifiche alla tabella non riescono e non vengono elaborate.

Visualizzazione della cronologia delle esecuzioni

È possibile visualizzare la cronologia delle esecuzioni di un'attività per identificare le cause principali e comprendere i pattern nel tempo.

• Fare clic su Cronologia esecuzioni nella vista Monitoraggio di un'attività.

• Fare clic su Cronologia esecuzioni nel menu ... di un'attività in Viste di monitoraggio.

Nella cronologia delle esecuzioni vengono visualizzate fino a 100 esecuzioni in base alle selezioni dei filtri. Affinare i criteri di filtro per visualizzare altre esecuzioni. È possibile filtrare in base alla data di fine dell'esecuzione e allo stato dell'attività. Le informazioni sulle esecuzioni vengono conservate per 13 mesi. I metadati del set di dati nelle esecuzioni vengono conservati per 30 giorni.