Övervakning av Qlik Open Lakehouse lagringsuppgift

Lagringsuppgiften i Qlik Open Lakehouse projekt skiljer sig från andra projekt eftersom den körs kontinuerligt, snarare än i batchläge. Följaktligen är övervakningsmåtten annorlunda.

Allmänna övervakningsdetaljer

Detta delavsnitt ger en sammanfattning av den övergripande uppgiftsstatusen:

• Datauppgift har uppdaterats till

  Tidsmarkören fram till vilken alla tabeller är helt synkroniserade. Det representerar den senaste tidpunkten då alla källändringar som har checkats in fram till det ögonblicket redan är tillgängliga i måltabellerna.

  Om inga nya källändringar upptäcks, ställs detta värde in på aktuell tid.

• Antal datauppsättningar

  Totalt antal datamängder som ingår i denna uppgift.

• Datauppsättningar med fel

  Totalt antal datauppsättningar i den här uppgiften som stötte på fel.

• Sjöhuskluster

  Namnet och statusen för klustret som den här uppgiften körs på.

Övervakningsinformation för fullständig laddning

Du kan visa följande information för datauppgiften i Status för fullständig laddning:

• Köad – antal tabeller som är köade för närvarande.

• Laddas – antal tabeller som laddas för närvarande.

• Slutförda – antal slutförda tabeller.

• Fel: antal tabeller med fel.

Du kan visa följande information för varje tabell i datauppgiften:

• Namn

  Namnet på måltabellen.

• Tillstånd

  Tabelltillståndet kommer att vara något av: köat, laddar, slutförd eller fel

• Påbörjad

  Tidpunkten när laddningen startade.

• Avslutat

  Tidpunkten när laddningen avslutades.

• Varaktighet

  Hur lång tid laddningen pågick i formatet hh:mm:ss.

• Poster

  Antalet poster som replikerades under laddningen.

• Meddelande

  Visar ett felmeddelande om laddningen inte kunde bearbetas utan fel.

Samla in ändrade data (CDC) övervakningsuppgifter

Du kan visa följande CDC-information i datauppgiften vid övervakning av bearbetning av ändringar i CDC-status:

• Inkommande ändringar: antal ändringar som finns i källan och som väntar på att bearbetas. Du kan visa hur många som ackumuleras och hur många som tillämpas.

• Bearbetade ändringar: antal ändringar som har bearbetats och tillämpats (under de senaste 24 timmarna).

• Latens: tidsskillnaden (tt:mm:ss) mellan den äldsta källhändelsens tidsmarkör i mellanlagring som inte har bearbetats till lagring och den aktuella tiden. Den här tiden anger tiden från när ändringen är tillgänglig i källan tills ändringen tillämpas och är tillgänglig i mellanlagringstillgången.

Du kan visa följande information för varje tabell i datauppgiften:

• Namn

  Namnet för måltabellen i mellanlagringstillgången.

• Tillstånd

  Tabelltillståndet kommer att vara något av: ackumulerar ändringar eller fel.

• Inkommande ändringar

  Antalet ändringar som bearbetats av mellanlagringsuppgiften och som väntar på att tillämpas av lagringsuppgiften.

• Bearbetade ändringar

  Det totala antalet ändringar som tillämpades på målet sedan datamängden senast laddades fullständigt (genom den initiala fullständiga laddningen eller genom omladdningsåtgärden).

• Senast bearbetad

  Den senaste källdatatiden som infogades i måldatamängden, översatt till lokal tid.

• Ej optimerade ändringar

  Antal poster som är sökbara via vyn, men ännu inte har slagits samman till optimerade Iceberg-partitioner. Höga antal kan påverka prestandan tills bakgrundsoptimeringarna är klara.

  Detta återspeglar antalet poster som för närvarande finns i ändringspartitionen som ännu inte har tillämpats på de aktuella eller historikpartitionerna.

  Om detta antal är konsekvent högt, överväg att öka klustrets beräkningskapacitet för att påskynda optimeringen.

• Meddelande

  Visar felmeddelanden om ändringar i tabellen inte kunde utföras och den därför inte bearbetas.