Speichern von Streaming-Datensätzen

Die folgenden Einstellungen für Streaming-Umwandlungsaufgaben gelten für Qlik Open Lakehouse-Projekte, die eine Streaming-Quelle verwenden.

Sie können Streaming-Daten mithilfe der Streaming-Umwandlungsdatenaufgabe speichern und umwandeln. Streaming-Daten enthalten oft verschachtelte Strukturen und Arrays, die eine Glättung erfordern, und Umwandlungsfunktionen werden während der Speicherphase benötigt. Diese Funktionen stehen der Streaming-Umwandlungsaufgabe zur Verfügung, sodass Sie Umwandlungen unmittelbar nach der Bereitstellung Ihrer Streaming-Daten anwenden können.

Speichereinstellungen

Sie können Eigenschaften für die Streaming-Umwandlungsdatenaufgabe festlegen, wenn die Datenplattform ein Qlik Open Lakehouse ist.

• Klicken Sie auf Einstellungen.

Allgemeine Einstellungen

• Aufgabenschema

  Sie können den Namen des Streaming-Umwandlungsaufgabenschemas ändern. Der Standardname ist der Name der Speicheraufgabe.

• Internes Schema

  Sie können den Namen des Datenobjektschemas des internen Speichers ändern. Der Standardname ist der Name der Speicheraufgabe, an den _internal angehängt ist.

• Präfix für alle Tabellen und Ansichten

  Sie können ein Präfix für alle Tabellen und Ansichten festlegen, die mit dieser Aufgabe erstellt wurden.

  InformationshinweisSie müssen ein eindeutiges Präfix verwenden, wenn Sie ein Datenbankschema in mehreren Datenaufgaben nutzen möchten.

• Zu verwendender Ordner

  Sie können den Ordner der Streaming-Umwandlungsaufgabe ändern.

• Einstellungen für neue Datensätze laden

  • Nur anhängen

    Fügt neue Datensätze ohne Änderung vorhandener Daten hinzu. Schlüsselbeschränkungen werden nicht durchgesetzt, wenn duplizierte Datensätze eintreffen.

  • Änderungen anwenden (Zusammenführen)

    Aktualisiert vorhandene Datensätze und fügt neue Datensätze basierend auf Schlüsselfeldern ein.

    Wenn Sie Änderungen zusammenführen möchten, können Sie auch Folgendes auswählen:

    • Datensätze durch Angabe eines Löschausdrucks vorübergehend löschen

      Definieren Sie einen Löschausdruck, um Datensätze zur Löschung zu markieren.

    • Verlaufsdatensätze beibehalten (Typ 2)

      Behalten Sie vorherige Versionen geänderter Datensätze bei.

• Verschachtelung der Spalten wird aufgehoben

  • Verschachtelte Spalten beibehalten

    Wählen Sie diese Option, um verschachtelte Daten beizubehalten.

  • In separate Spalten aufteilen

    Das Standardverhalten ist das Aufteilen in separate Spalten.

• Partition der Zieltabellen

  • Keine Partition

    Neue Tabellen werden ohne Partitionen erstellt.

  • Partition nach Ereignisdatum

    Die Tabellen werden anhand des Datums partitioniert, an dem die Ereignisse eingelesen werden.

Laufzeiteinstellungen

• Lakehouse-Cluster

  Sie können den Lakehouse-Cluster ändern, aber dieser muss Streaming-Arbeitslasten oder gemischte Arbeitslasten unterstützen.

Schemaentwicklungseinstellungen

• Spalten auf Root-Ebene hinzufügen

  Diese Einstellung gilt, wenn auf Root-Ebene neue Spalten zur Streaming-Bereitstellungsaufgabe hinzugefügt werden.

  • Auf Ziel anwenden

    Fügt automatisch neue Spalten auf Root-Ebene von der Streaming-Bereitstellungsaufgabe zur Streaming-Umwandlungsaufgabe hinzu. Dies ist die Standardeinstellung.

  • Ignorieren

    Fügt keine neuen Spalten auf Root-Ebene hinzu.

  • Aufgabe anhalten

    Hält die Umwandlungsaufgabe an, wenn eine neue Spalte auf Root-Ebene in der Streaming-Bereitstellungsaufgabe erkannt wird.

• Spalten zu Strukturen hinzufügen

  Diese Einstellung gilt, wenn neue Felder in einer vorhandenen verschachtelten Struktur in der Streaming-Bereitstellungsaufgabe hinzugefügt werden.

  • Auf Ziel anwenden

    Fügt automatisch neue Felder zu bestehenden Strukturen in der Streaming-Umwandlungsaufgabe hinzu, wenn sie der Bereitstellungsstruktur hinzugefügt werden.

  • Ignorieren

    Fügt keine neuen Felder zu bestehenden Strukturen hinzu.

  • Aufgabe anhalten

    Hält die Umwandlungsaufgabe an, wenn ein neues Feld zu einer Struktur in der Streaming-Bereitstellungsaufgabe hinzugefügt wird.

• Feld-Datentyp ändern

  • Ignorieren

    Ändert den Datentyp nicht.

  • Aufgabe anhalten

    Hält die Umwandlungsaufgabe an, wenn eine Datentypänderung in der Streaming-Bereitstellungsaufgabe erkannt wird.