Überwachen einer Qlik Open Lakehouse Speicheraufgabe

Die Speicheraufgabe in Qlik Open Lakehouse Projekten unterscheidet sich von anderen Projekten, da sie kontinuierlich und nicht im Stapelmodus ausgeführt wird. Folglich sind die Überwachungsmetriken unterschiedlich.

Allgemeine Überwachungsübersicht

Die Überwachungsansicht ermöglicht Ihnen die Verfolgung von Aufgabenstatus und Metriken:

• Registerkarten

  Wechseln Sie zwischen Info, Vollständiges Laden und Änderungsverarbeitung, um die relevanten Metriken für jede Phase der Aufgabe anzuzeigen.

• Datensatz-Statusfilter

  Ein Balkendiagramm oberhalb der Datensatztabelle zeigt an, wie viele Datensätze sich in welchem Status befinden: In Warteschlange gestellt, Wird geladen, Abgeschlossen und Fehler. Das Diagramm wird dynamisch aktualisiert, sooft sich Datensatzstatus ändern. Klicken Sie auf ein Statussegment, um die Datensatztabelle zu filtern, sodass nur Datensätze in diesem Status angezeigt werden.

• Widgets ausblenden

  Klicken Sie auf Widgets ausblenden, um die Metrik-Widgets auszublenden. Dies bietet mehr Platz, um die Datensatztabellen unten anzuzeigen.

• Startdatum

  Datum und Uhrzeit, zu der die aktuelle Aufgabenausführung gestartet wurde.

• Enddatum

  Datum und Uhrzeit, zu der die aktuelle Aufgabenausführung beendet wurde. Dies wird nur für abgeschlossene Aufgabenausführungen angezeigt.

• Ausführungsverlauf

  Klicken Sie auf Ausführungsverlauf, um eine Liste der vorherigen Aufgabenausführungen und deren Ergebnisse anzuzeigen.

Info – Überwachungsdetails

Der Abschnitt Info gibt einen Überblick über den Gesamtstatus der Aufgabe:

• Ausführen

  Zeigt die Ausführungs-ID der aktuellen Ausführung an.

• Daten

  Datenaufgabe wird aktualisiert auf zeigt um die Uhrzeit an, um die die älteste Ansicht aktualisiert wurde. Er stellt den spätesten Zeitpunkt dar, an dem alle bis zu diesem Zeitpunkt vorgenommenen Quellenänderungen bereits in den Zieltabellen verfügbar sind.

  Wenn keine neuen Quellenänderungen erkannt werden, wird dieser Wert auf die aktuelle Zeit festgelegt.

• Aufgabe

  Zeigt den Namen und Status des Clusters, auf dem diese Aufgabe ausgeführt wird, sowie allgemeine Aufgabeninformationen und den Status an.

Details zur Überwachung des vollständigen Ladens

Sie können die folgenden Statistiken für die Datenaufgabe unter Vollständiges Laden anzeigen:

• Datensätze gesamt

  Die Anzahl der geladenen Datensätze.

• Fehlerhafte Datensätze

  Die Anzahl der fehlerhaften Datensätze.

• Eingehende Änderungen

  Die Anzahl der eingehenden Änderungen.

• Gesamtlatenz

  Die aktuelle Latenz der Aufgabe (hh:mm:ss). Diese Dauer ist die Zeit, ab der die Änderung in der Quelle verfügbar ist, bis zum Zeitpunkt, an dem die Änderung angewendet wird und im Ziel verfügbar ist.

Sie können die folgenden Details für jede Tabelle in der Datenaufgabe anzeigen:

• Name

  Der Name der Zieldatenbank.

• Zustand

  Der Tabellenstatus ist einer der Folgenden: In Warteschlange gestellt, Wird geladen, Abgeschlossen oder Fehler.

• Gestartet

  Uhrzeit, um die der Ladevorgang gestartet wurde.

• Beendet

  Uhrzeit, um die der Ladevorgang beendet wurde.

• Dauer

  Dauer des Ladevorgangs im Format hh:mm:ss.

• Datensätze

  Anzahl der Datensätze, die während des Ladevorgangs repliziert wurden

• Meldung

  Zeigt eine Fehlermeldung an, wenn der Ladevorgang nicht erfolgreich verarbeitet wurde.

Details zur Überwachung der Änderungsverarbeitung

Sie können die folgenden Details für die Datenaufgabe anzeigen, um die Änderungsverarbeitung in Änderungsverarbeitung zu überwachen:

• Datensätze gesamt

  Die Anzahl der geladenen Datensätze.

• Fehlerhafte Datensätze

  Die Anzahl der fehlerhaften Datensätze.

• Eingehende Änderungen

  Die Anzahl der eingehenden Änderungen.

• Verarbeitete Änderungen

  Die Anzahl der verarbeiteten Änderungen.

• Gesamtlatenz

  Die aktuelle Latenz der Aufgabe (hh:mm:ss). Diese Dauer ist die Zeit, ab der die Änderung in der Quelle verfügbar ist, bis zum Zeitpunkt, an dem die Änderung angewendet wird und im Ziel verfügbar ist.

Sie können die folgenden Details für jede Tabelle in der Datenaufgabe anzeigen:

• Name

  Name der Zieltabelle im Bereitstellungsobjekt

• Zustand

  Der Tabellenstatus ist entweder „Änderungen werden akkumuliert“ oder „Fehler“

• Eingehende Änderungen

  Die Anzahl der von der Bereitstellungsaufgabe verarbeiteten Änderungen, die darauf warten, von der Speicheraufgabe angewendet zu werden.

• Verarbeitete Änderungen

  Die Gesamtzahl der Änderungen, die seit dem letzten vollständigen Laden des Datensatzes (durch das anfängliche vollständige Laden oder durch eine Neuladeaktion) an dem Ziel vorgenommen wurden.

• Zuletzt verarbeitet

  Die letzte Quelldatenzeit, die in den Zieldatensatz eingefügt wurde, umgerechnet in Ortszeit.

• Nicht optimierte Änderungen

  Anzahl der Datensätze, die über die Ansicht abgefragt werden können, aber noch nicht in optimierte Iceberg-Partitionen zusammengeführt wurden. Eine hohe Anzahl kann die Leistung beeinträchtigen, bis die Optimierungen im Hintergrund abgeschlossen sind.

  Dies spiegelt die Anzahl der Datensätze wider, die sich derzeit in der Änderungspartition befinden und noch nicht auf die aktuelle oder Verlaufs-Partition angewendet wurden.

  Wenn diese Zahl konstant hoch ist, sollten Sie die Rechenkapazität des Clusters erhöhen, um die Optimierung zu beschleunigen.

• Meldung

  Zeigt eine Fehlermeldung an, wenn Änderungen an der Tabelle fehlschlagen und nicht verarbeitet werden.

Anzeigen des Ausführungsverlaufs

Sie können den Ausführungsverlauf einer Aufgabe anzeigen, um die Ursachen zu ermitteln und Muster im Zeitverlauf zu verstehen.

• Klicken Sie in der Überwachungsansicht einer Aufgabe auf Ausführungsverlauf.

• Klicken Sie in der Überwachungsansicht einer Aufgabe im Menü ... auf Ausführungsverlauf.

Bis zu 100 Ausführungen werden im Ausführungsverlauf basierend auf Ihren Filterauswahlen angezeigt. Verfeinern Sie die Filterkriterien, um andere Ausführungen anzuzeigen. Sie können nach Ausführungsendedatum und Aufgabenstatus filtern. Informationen zu Ausführungen werden 13 Monate beibehalten. Datensatzmetadaten in Ausführungen werden 30 Tage beibehalten.