Impostazioni del progetto della pipeline di dati
È possibile modificare le impostazioni per un progetto della pipeline di dati in Qlik Talend Data Integration. Le proprietà sono comuni al progetto e a tutte le attività dati incluse. Alcune impostazioni sono disponibili solo per piattaforme dati specifiche.
-
Fare clic su Impostazioni nel progetto.
Piattaforma dati
È possibile modificare le seguenti impostazioni:
-
Connessione
Connessione per il progetto.
-
Connessione all'area di staging
Questa opzione non è disponibile quando la piattaforma dati è Snowflake.
Metadati
È possibile impostare un suffisso per gli artefatti interni e suffissi predefiniti per le viste create.
-
Preferenze artefatti interni
Impostare il suffisso da utilizzare per gli schemi utilizzati per archiviare gli artefatti interni in Suffisso schema.
-
Suffissi viste esterne
Impostare i suffissi predefiniti per le viste create nelle attività dati incluse nel progetto.
-
Hash
È possibile impostare una stringa salt di hash da utilizzare durante l'hashing di una colonna, ad esempio per mascherare informazioni sensibili. Questo genererà un hash SHA-256 della colonna di input dopo averla concatenata con la stringa salt di hash.
È possibile utilizzare l'ID del progetto come stringa salt o impostare una stringa salt personalizzata.
Nota informaticaQuesta impostazione è disponibile solo nei progetti Qlik Open Lakehouse. La funzione Hash è disponibile nelle attività di trasferimento in streaming.
Impostazioni predefinite per le nuove attività
È possibile impostare valori predefiniti per le attività dati create nel progetto. Quando si crea un'attività dati, è possibile modificarne il valore.
È possibile impostare il database predefinito per creare artefatti di destinazione per tutti i tipi di attività dati.
Impostazioni predefinite di trasferimento
-
Quando si utilizza Data Movement gateway, connettersi tramite proxy a
Quando si utilizza Gateway Data Movement, è possibile connettersi alla piattaforma di destinazione e alla piattaforma (area) di staging tramite un proxy.
Per ulteriori informazioni sulla configurazione di Gateway Data Movement per l'utilizzo di un server proxy, vedere Impostazione del tenant Qlik Cloud e di un server proxy.
-
Piattaforma di destinazione
Nota informaticaDisponibile quando si utilizzano Snowflake, Google BigQuery e Databricks. -
Piattaforma di staging
Nota informaticaDisponibile quando si utilizzano Azure Synapse Analytics, Amazon Redshift e Databricks.
-
Impostazioni predefinite di archiviazione
-
Archivio dati storici (Tipo 2)
È possibile conservare i dati delle modifiche storiche per consentire di ricreare facilmente i dati come apparivano in un momento specifico. È possibile utilizzare le viste cronologia e le viste cronologia in tempo reale per visualizzare i dati storici.
-
Viste in tempo reale
Le viste in tempo reale mostrano una vista per ogni tabella di origine selezionata che unisce la tabella con le modifiche dalla tabella delle modifiche. Ciò fornisce alle query una vista in tempo reale dei dati senza dover attendere il ciclo di applicazione successivo.
Database predefinito
È possibile utilizzare il database predefinito del progetto o specificare un altro database.
Catalogo
-
Pubblica nel catalogo
Selezionare questa opzione per pubblicare questa versione dei dati nel Catalogo come set di dati. Il contenuto del Catalogo verrà aggiornato la prossima volta che si prepara questa attività.
Impostazioni predefinite di trasformazione
-
Archivio dati storici (Tipo 2)
È possibile conservare i dati delle modifiche storiche per consentire di ricreare facilmente i dati come apparivano in un momento specifico. È possibile utilizzare le viste cronologia e le viste cronologia in tempo reale per visualizzare i dati storici.
Materializzazione
-
Non materializzato (solo viste)
Selezionare questa opzione per creare solo viste che eseguono trasformazioni al volo.
-
Materializzato (tabelle e viste)
Selezionare questa opzione per creare sia tabelle che viste.
Database predefinito
È possibile utilizzare il database predefinito del progetto o specificare un altro database.
Catalogo
-
Pubblica nel catalogo
Selezionare questa opzione per pubblicare questa versione dei dati nel Catalogo come set di dati. Il contenuto del Catalogo verrà aggiornato la prossima volta che si prepara questa attività.
Impostazioni predefinite del data mart
Database predefinito
È possibile utilizzare il database predefinito del progetto o specificare un altro database.
Catalogo
-
Pubblica nel catalogo
Selezionare questa opzione per pubblicare questa versione dei dati nel Catalogo come set di dati. Il contenuto del Catalogo verrà aggiornato la prossima volta che si prepara questa attività.
Impostazioni predefinite dei dati registrati
Database predefinito
È possibile utilizzare il database predefinito del progetto o specificare un altro database.
Catalogo
-
Pubblica nel catalogo
Selezionare questa opzione per pubblicare questa versione dei dati nel Catalogo come set di dati. Il contenuto del Catalogo verrà aggiornato la prossima volta che si prepara questa attività.
Impostazioni di caricamento incrementale
Queste impostazioni sono disponibili quando è selezionato Incrementale utilizzando limite massimo.
-
Tabelle delle modifiche
Se le modifiche si trovano nella stessa tabella, selezionare Le modifiche sono all'interno della stessa tabella.
In caso contrario, deselezionare Le modifiche sono all'interno della stessa tabella e specificare un modello di tabella delle modifiche.
-
Colonna limite
Impostare il nome della colonna limite in Nome.
-
Colonna "Dalla data"
È possibile indicare la "Dalla data" in base all'ora di inizio o utilizzando una colonna selezionata.
Se si seleziona Colonna "Dalla data" selezionata, è necessario definire un Modello "Dalla data".
-
Eliminazioni temporanee
È possibile includere le eliminazioni temporanee nelle modifiche selezionando Le modifiche includono eliminazioni temporanee e definendo un'espressione di indicazione.
L'espressione di indicazione deve restituire True se la modifica è un'eliminazione temporanea.
Esempio: ${is_deleted} = 1
-
Immagine precedente
È possibile filtrare i record dell'immagine precedente nelle modifiche delle tabelle delle modifiche selezionando Immagine precedente e definendo un'espressione di indicazione.
L'espressione di indicazione deve restituire True se la riga contiene l'immagine prima dell'aggiornamento.
Esempio: ${header__change_oper} = 'B'
Runtime
È possibile definire le impostazioni predefinite delle prestazioni di runtime per gli asset di dati inclusi nel progetto.
Valori predefiniti di trasferimento
-
È possibile impostare il numero massimo di connessioni al database in Esecuzione parallela.
Valori predefiniti di archiviazione
-
È possibile impostare le impostazioni di pianificazione predefinite su una pianificazione basata sul tempo. Questo sarà il valore predefinito per ogni attività di archiviazione creata.
-
È possibile impostare il data warehouse predefinito se la piattaforma del progetto è Snowflake.
Valori predefiniti di trasformazione
-
È possibile impostare le impostazioni di pianificazione predefinite su una pianificazione basata sul tempo o su Al completamento con esito positivo di qualsiasi attività dati di input. Questo sarà il valore predefinito per ogni attività di trasformazione creata.
-
È possibile impostare il data warehouse predefinito se la piattaforma del progetto è Snowflake.
Valori predefiniti del data mart
-
È possibile impostare le impostazioni di pianificazione predefinite su una pianificazione basata sul tempo o su Al completamento con esito positivo di qualsiasi attività dati di input. Questo sarà il valore predefinito per ogni attività del data mart creata.
-
È possibile impostare il data warehouse predefinito se la piattaforma del progetto è Snowflake.
Valori predefiniti di mirroring
-
È possibile impostare il data warehouse predefinito se la piattaforma del progetto è Snowflake.