Een Qlik Open Lakehouse opslagtaak bewaken
De opslagtaak in Qlik Open Lakehouse projecten verschilt van andere projecten, omdat deze continu draait in plaats van in batchmodus. Als gevolg hiervan zijn monitoringstatistieken anders.
Algemene bewakings overzicht
De monitoringweergave laat u de taakstatus en metrische gegevens volgen:
-
Tabbladen
Schakelen tussen Info, Volledige lading en Verwerken van wijzigingen om de relevante metrische gegevens voor elke fase van de taak te bekijken.
-
Datasetstatusfilter
Een staafdiagram boven de tabel met gegevensverzamelingen toont hoeveel gegevensverzamelingen zich in elke status bevinden: In wachtrij, Laden, Voltooid, en Fout. Het diagram wordt dynamisch bijgewerkt naarmate de statussen van de gegevensset wijzigen. Klik op een statussegment om de datasetstabel te filteren en alleen datasets met die status weer te geven.
-
Widgets verbergen
Klik Widgets verbergen om de metrische widgets samen te vouwen. Dit biedt meer ruimte om de onderstaande tabel met gegevensverzamelingen te bekijken.
-
Startdatum
De datum en tijd waarop de huidige taakuitvoering begon.
-
Einddatum
De datum en tijd waarop de taakuitvoering is beëindigd. Dit wordt alleen weergegeven voor voltooide taakuitvoeringen.
-
Geschiedenis uitvoeringen
Klik op Uitvoeringsgeschiedenis om een lijst met eerdere taakuitvoeringen en hun resultaten te bekijken.
Info bewakingsdetails
De Info sectie biedt een samenvatting van de algehele taakstatus:
-
Uitvoeren
Toont de Uitvoerings-ID van de huidige uitvoering.
-
Gegevens
Gegevenstaak is bijgewerkt met geeft de tijd weer waarop de oudste weergave is bijgewerkt. Het vertegenwoordigt het meest recente tijdstip waarop alle bronwijzigingen die tot dat moment zijn vastgelegd, al beschikbaar zijn in de doeltabellen.
Als er geen nieuwe bronwijzigingen worden gedetecteerd, wordt deze waarde ingesteld op de huidige tijd.
-
Taak
Toont de naam en status van het cluster waarop deze taak wordt uitgevoerd, en algemene taakinformatie en -status.
Bewakingsdetails volledige lading
U kunt de volgende statistieken bekijken voor de gegevenstaak in Volledige lading:
-
Totaal aantal gegevensverzamelingen
Het aantal geladen gegevensverzamelingen.
-
Gegevensverzamelingen met fouten
Het aantal datasets waarbij fouten zijn opgetreden.
-
Binnenkomende wijzigingen
Het aantal binnenkomende wijzigingen.
-
Totale latentie
Huidige latentie van de taak (uu:mm:ss). Deze duur vertegenwoordigt de tijd vanaf het moment dat de wijziging beschikbaar is in de bron totdat de wijziging is toegepast en beschikbaar is in het doel.
U kunt de volgende details weergeven voor elke tabel in de gegevenstaak:
-
Naam
De naam van de doeltabel.
-
Status
Tabelstatus is: In wachtrij, Wordt geladen, Voltooid of Fout.
-
Gestart
Het tijdstip waarop de laadbewerking is gestart.
-
Beëindigd
Het tijdstip waarop de laadbewerking is beëindigd.
-
Duur
De duur van het laden in de notatie uu:mm:ss.
-
Records
Het aantal records dat werd gerepliceerd tijdens het laden.
-
Bericht
Toont een foutbericht als de laadbewerking niet met succes is verwerkt.
Bewakingsdetails verwerken van wijzigingen
U kunt de volgende details bekijken voor de gegevenstaak om het verwerken van wijzigingen te bewaken in Wijzigingsverwerking:
-
Totaal aantal gegevensverzamelingen
Het aantal geladen gegevensverzamelingen.
-
Gegevensverzamelingen met fouten
Het aantal datasets waarbij fouten zijn opgetreden.
-
Binnenkomende wijzigingen
Het aantal binnenkomende wijzigingen.
-
Verwerkte wijzigingen
Het aantal verwerkte wijzigingen.
-
Totale latentie
Huidige latentie van de taak (uu:mm:ss). Deze duur vertegenwoordigt de tijd vanaf het moment dat de wijziging beschikbaar is in de bron totdat de wijziging is toegepast en beschikbaar is in het doel.
U kunt de volgende details weergeven voor elke tabel in de gegevenstaak:
-
Naam
De naam van de doeltabel in de tussenopslag.
-
Status
Tabelstatus is: Wijzigingen verzamelen of Fout.
-
Binnenkomende wijzigingen
Het aantal wijzigingen verwerkt door de tussenopslagtaak die wachten om te worden toegepast door de opslagtaak.
-
Verwerkte wijzigingen
Het totale aantal wijzigingen dat is toegepast op het doel sinds de dataset voor het laatst volledig is geladen (door de initiële volledige lading of door een herlaadactie).
-
Laatst verwerkt
De laatste brondatatijd die is ingevoegd in de doeldataset, vertaald naar lokale tijd.
-
Niet-geoptimaliseerde wijzigingen
Aantal records waarop query's kunnen worden uitgevoerd via de weergave, maar nog niet samengevoegd in geoptimaliseerde Iceberg-partities. Hoge aantallen kunnen de prestaties beïnvloeden totdat achtergrondoptimalisaties zijn voltooid.
Dit weerspiegelt het aantal records dat zich momenteel in de wijzigingspartitie bevindt en dat nog niet is toegepast op de huidige of historiepartities.
Als dit getal consistent hoog is, overweeg dan de rekenkrachtcapaciteit van het cluster te verhogen om optimalisatie te versnellen.
-
Bericht
Geeft een foutmelding als wijzigingen in de tabel mislukken en niet worden verwerkt.
Uitvoeringsgeschiedenis bekijken
U kunt de uitvoeringsgeschiedenis van een taak bekijken om de hoofdoorzaken te identificeren en patronen in de loop van de tijd te begrijpen.
-
Klik op Uitvoeringsgeschiedenis in de weergave Monitoren van een taak.
-
Klik op Uitvoeringsgeschiedenis in het menu ... van een taak in Monitorweergaven.
Er worden maximaal 100 uitvoeringen weergegeven in de uitvoeringsgeschiedenis op basis van uw filterselecties. Verfijn uw filtercriteria om andere uitvoeringen te zien. U kunt filteren op de einddatum van de uitvoering en de taakstatus. Uitvoeringsinformatie wordt 13 maanden bewaard. Dataset-metadata in uitvoeringen wordt 30 dagen bewaard.