Övervakning av lagringsuppgift för Qlik Open Lakehouse
Lagringsuppgiften i Qlik Open Lakehouse-projekt skiljer sig från andra projekt eftersom den körs kontinuerligt, snarare än i batchläge. Som ett resultat är övervakningsmåtten annorlunda.
Allmän övervakningsöversikt
Övervakningsvyn låter dig spåra uppgiftsstatus och mätvärden:
-
Flikar
Växla mellan Info, Fullständig laddning och Ändringshantering för att visa relevanta mätvärden för varje fas av uppgiften.
-
Statusfilter för datamängd
Ett stapeldiagram ovanför tabellen med datamängder visar hur många datamängder som har varje status: I kö, Läser in, Slutförd och Fel. Diagrammet uppdateras dynamiskt när statusen för datamängderna ändras. Klicka på ett statussegment för att filtrera tabellen med datamängder så att endast datamängder med den statusen visas.
-
Dölj widgetar
Klicka på Dölj widgetar för att dölja mätvärdeswidgetarna. Detta ger mer utrymme för att visa tabellen med datamängder nedan.
-
Startdatum
Datum och tid då den aktuella uppgiftskörningen startade.
-
Slutdatum
Datum och tid då uppgiftskörningen avslutades. Detta visas endast för slutförda uppgiftskörningar.
-
Körningshistorik
Klicka på Körningshistorik för att visa en lista över tidigare uppgiftskörningar och deras resultat.
Övervakningsdetaljer för Info
Delavsnittet Info ger en sammanfattning av den övergripande uppgiftsstatusen:
-
Körning
Visar Körnings-ID för den aktuella körningen.
-
Data
Datauppgiften är uppdaterad till visar den tidpunkt till vilken den äldsta vyn är uppdaterad. Den representerar den senaste tidpunkten då alla källändringar som bekräftats fram till det ögonblicket redan är tillgängliga i måltabellerna.
Om inga nya källändringar upptäcks sätts detta värde till den aktuella tiden.
-
Uppgift
Visar namn och status för klustret som denna uppgift körs på, samt allmän uppgiftsinformation och status.
Övervakningsdetaljer för fullständig laddning
Du kan visa följande statistik för datauppgiften i Fullständig laddning:
-
Totalt antal datamängder
Antalet inlästa datamängder.
-
Felaktiga datamängder
Antalet datamängder med fel.
-
Inkommande ändringar
Antalet inkommande ändringar.
-
Total latens
Aktuell latens för uppgiften (tt:mm:ss). Denna varaktighet representerar tiden från det att ändringen är tillgänglig i källan tills ändringen tillämpas och är tillgänglig i målet.
Du kan visa följande detaljer för varje tabell i datauppgiften:
-
Namn
Namnet på måltabellen.
-
Tillstånd
Tabelltillståndet kommer att vara antingen: I kö, Läser in, Slutförd eller Fel.
-
Startad
Tidpunkten då inläsningen startade.
-
Avslutad
Tidpunkten då inläsningen avslutades.
-
Varaktighet
Inläsningens varaktighet i formatet tt:mm:ss.
-
Poster
Antalet poster som replikerades under inläsningen.
-
Meddelande
Visar felmeddelande om inläsningen inte kunde bearbetas.
Övervakningsdetaljer för ändringshantering
Du kan visa följande detaljer för datauppgiften för att övervaka ändringshantering i Ändringshantering:
-
Totalt antal datamängder
Antalet inlästa datamängder.
-
Felaktiga datamängder
Antalet datamängder med fel.
-
Inkommande ändringar
Antalet inkommande ändringar.
-
Bearbetade ändringar
Antalet bearbetade ändringar.
-
Total latens
Aktuell latens för uppgiften (tt:mm:ss). Denna varaktighet representerar tiden från det att ändringen är tillgänglig i källan tills ändringen tillämpas och är tillgänglig i målet.
Du kan visa följande detaljer för varje tabell i datauppgiften:
-
Namn
Namnet på måltabellen i mellanlagringstillgången.
-
Tillstånd
Tabelltillståndet kommer att vara antingen: Ackumulerar ändringar eller Fel.
-
Inkommande ändringar
Antalet ändringar som bearbetats av mellanlagringsuppgiften och som väntar på att tillämpas av lagringsuppgiften.
-
Bearbetade ändringar
Det totala antalet ändringar som tillämpats på målet sedan datamängden senast lästes in helt (genom den inledande fullständiga laddningen eller genom en omladdningsåtgärd).
-
Senast bearbetad
Den senaste källtidpunkten som infogades i måldatamängden, översatt till lokal tid.
-
Ooptimerade ändringar
Antal poster som är sökbara via vyn, men som ännu inte har sammanfogats till optimerade Iceberg-partitioner. Höga antal kan påverka prestandan tills bakgrundsoptimeringar har slutförts.
Detta återspeglar antalet poster som för närvarande finns i ändringspartitionen och som ännu inte har tillämpats på partitionerna aktuell eller historik.
Om detta antal är konsekvent högt bör du överväga att öka klustrets beräkningskapacitet för att påskynda optimeringen.
-
Meddelande
Visar felmeddelande om ändringar i tabellen misslyckas och inte bearbetas.
Visa körningshistorik
Du kan visa körningshistoriken för en uppgift för att identifiera rotorsaker och förstå mönster över tid.
-
Klicka på Körningshistorik i vyn Övervaka för en uppgift.
-
Klicka på Körningshistorik i menyn ... för en uppgift i Övervakningsvyer.
Upp till 100 körningar visas i körningshistoriken baserat på dina filterval. Förfina dina filterkriterier för att se andra körningar. Du kan filtrera på slutdatum för körning och uppgiftsstatus. Körningsinformation sparas i 13 månader. Dataset-metadata i körningar sparas i 30 dagar.