Lagra strömmande datauppsättningar

Följande inställningar för strömmande transformeringsuppgifter gäller för Qlik Open Lakehouse projekt som använder en strömmande källa.

Du kan lagra och transformera strömmande data med uppgiften Strömmande transformera data. Strömmande data innehåller ofta kapslade strukturer och matriser som kräver utplattning, och transformeringsfunktioner behövs under lagringsfasen. Dessa funktioner är tillgängliga för uppgiften Strömmande transformering, vilket gör att du kan tillämpa transformeringar omedelbart efter mellanlagring av dina strömmande data.

Lagringsinställningar

Du kan ställa in egenskaper för strömningstransformeringsdatauppgiften när dataplattformen är Qlik Open Lakehouse.

• Klicka på Inställningar.

Allmänna inställningar

• Uppgiftsschema

  Du kan byta namn på schemat för strömningstransformeringsuppgiften. Standardnamnet är namnet på lagringsuppgiften.

• Internt schema

  Du kan ändra namnet på datatillgångsschemat för intern lagring. Standardnamnet är namnet på lagringsuppgiften med _internal som tillägg.

• Prefix för alla tabeller och vyer

  Du kan ange prefix för alla tabeller och vyer som skapas av uppgiften.

  Anteckning om informationDu måste använda ett unikt prefix om du vill använda ett databasschema i flera datauppgifter.

• Mapp som ska användas

  Du kan ändra lagringsmappen för strömningstransformeringsuppgiften.

• Hämta inställningar för nya datauppsättningar

  • Endast tillägg

    Lägger till nya poster utan att ändra befintliga data.Nyckelbegränsningar tillämpas inte om dubblettposter uppstår.

  • Tillämpa ändringar (Sammanfoga)

    Uppdaterar befintliga poster och infogar nya poster baserat på nyckelfält.

    Om du väljer att sammanfoga ändringar kan du även välja följande:

    • Mjukradera poster genom att ange ett raderingsuttryck

      Definiera ett raderingsuttryck för att markera poster för radering.

    • Behåll historiska poster (Typ 2)

      Behåll tidigare versioner av ändrade poster.

• Avnästling av kolumner

  • Behåll nästlade kolumner

    Välj att bevara kapslad data.

  • Avnästla till separata kolumner

    Standardbeteendet är att avkapsla till separata kolumner.

• Måltabellspartitionering

  • Ingen partition

    Nya tabeller skapas utan partitioner.

  • Partitionera efter händelsedatum

    Nya tabeller partitioneras efter datumet då händelser matas in.

Inställningar för körtid

• Datasjöhuskluster

  Du kan ändra lakehouse-klustret, men det måste stödja strömbaserade arbetsbelastningar eller blandade arbetsbelastningar.

Inställningar för schemautveckling

• Lägg till kolumner på rotnivå

  Den här inställningen gäller när nya kolumner läggs till i den strömmande mellanlagringsuppgiften på rotnivå.

  • Tillämpa på mål

    Lägger automatiskt till nya kolumner på rotnivå från den strömmande mellanlagringsuppgiften till den strömmande transformeringsuppgiften. Detta är standardinställningen.

  • Ignorera

    Lägger inte till nya kolumner på rotnivå.

  • Stoppa uppgift

    Stoppar transformeringsuppgiften om en ny kolumn på rotnivå upptäcks i strömmande mellanlagringsuppgiften.

• Lägg till kolumner i strukturer

  Den här inställningen gäller när nya fält läggs till i en befintlig nästlad struktur i den strömmande mellanlagringsuppgiften.

  • Tillämpa på mål

    Lägger automatiskt till nya fält i befintliga strukturer i strömmande transformeringsuppgiften om de läggs till i mellanlagringsstrukturen.

  • Ignorera

    Lägger inte till nya fält i befintliga strukturer.

  • Stoppa uppgift

    Stoppar transformeringsuppgiften om ett nytt fält läggs till i en struktur i Streaming-mellanlagringsuppgiften.

• Ändra datatyp för fält

  • Ignorera

    Ändrar inte datatypen.

  • Stoppa uppgift

    Stoppar transformeringsuppgiften om en ändring av datatypen upptäcks i Streaming-mellanlagringsuppgiften.