Progettare il progetto di integrazione dati

Uso degli spazi in Integrazione dati

Creare uno spazio dati che viene utilizzato per creare e archiviare il progetto. All'interno dello spazio è inoltre possibile creare nuove connessioni utilizzando i connettori e gestire l'accesso ai gateway di Data Movement.

Configurazione di connessioni alle sorgenti dati

Creare connessioni alle sorgenti dati.

Configurazione delle connessioni alle destinazioni

Creare connessioni alla piattaforma di destinazione.

Qlik Data Gateway - Data Movement

Configurare Qlik Data Gateway - Data Movement per consentire lo spostamento sicuro dei dati da sorgenti dati aziendali e applicazioni SaaS nelle destinazioni supportate.

Creazione di una pipeline di dati in un progetto

I progetti di pipeline di dati supportano l'acquisizione di dati da un gran numero di sorgenti dati supportate in una piattaforma di dati, dove è possibile trasformare i dati con trasformazioni ELT (pushdown) per supportare architetture di data lakehouse e data warehouse. Le pipeline supportano operazioni CDC basate su log e sorgenti dati incrementali, ma forniscono una serie di opzioni per l'acquisizione dei dati nelle principali piattaforme di data warehouse.

Utilizzare un progetto di pipeline di dati quando si desidera effettuare quanto segue:

• Supportare le strutture di dati di tipo 1 e 2 con i processi di acquisizione.

• Trasformare e rimodellare i dati per ottenere un output adatto allo scopo o degli schemi a stella per i carichi di lavoro analitici.

• Creare un data lakehouse basato su Iceberg.

• Creare pipeline complesse che vengono gestite nei progetti per i limiti organizzativi o funzionali.

Creazione di un progetto di replica

I progetti di replica supportano la replica diretta da un gran numero di sorgenti supportate ai data lake o a qualsiasi piattaforma di destinazione supportata. I dati vengono applicati direttamente alle strutture di destinazione, ma non sono supportate trasformazioni o rimodellamenti complessi dei dati. Le pipeline per la replica supportano un set più vasto di tecnologie di destinazione per gli scenari di replica.

Utilizzare un progetto di replica quando si desidera effettuare quanto segue:

• Replicare i dati alla destinazione e non sono necessarie trasformazioni complesse per quei dati.

• Replicare i dati in una destinazione non supportata dalle pipeline di dati.

Gestione dei progetti con il controllo della versione

Utilizzare il controllo della versione per gestire lo sviluppo di un progetto dati e per tenere traccia delle modifiche.