Ustawienia projektu potoku danych
Możesz zmienić ustawienia projektu potoku danych w Qlik Talend Data Integration. Właściwości są wspólne dla projektu i wszystkich uwzględnionych zadań danych. Niektóre ustawienia są dostępne tylko dla określonych platform danych.
-
Kliknij Ustawienia w projekcie.
Platforma danych
Możesz zmienić następujące ustawienia:
-
Połączenie
Połączenie dla projektu.
-
Połączenie z obszarem pomostowym
Ta opcja nie jest dostępna, gdy platformą danych jest Snowflake.
Metadane
Możesz ustawić przyrostek dla wewnętrznych artefaktów i domyślne przyrostki dla tworzonych widoków.
-
Preferencje wewnętrznych artefaktów
Ustaw przyrostek, który ma być używany dla schematów używanych do przechowywania wewnętrznych artefaktów w Przyrostek schematu.
-
Przyrostki widoków zewnętrznych
Ustaw domyślne przyrostki dla widoków tworzonych w zadaniach danych uwzględnionych w projekcie.
-
Skrót
Możesz ustawić ciąg soli skrótu, który będzie używany podczas tworzenia skrótu kolumny, na przykład w celu maskowania poufnych informacji. Spowoduje to wygenerowanie skrótu SHA-256 kolumny wejściowej po połączeniu jej z ciągiem soli skrótu.
Możesz użyć identyfikatora projektu jako ciągu soli lub ustawić niestandardowy ciąg soli.
InformacjaTo ustawienie jest dostępne tylko w projektach Qlik Open Lakehouse. Funkcja skrótu jest dostępna w zadaniach umieszczania strumieniowego.
Domyślne ustawienia dla nowych zadań
Możesz ustawić wartości domyślne dla zadań danych tworzonych w projekcie. Podczas tworzenia zadania danych możesz zmienić tę wartość.
Możesz ustawić domyślną bazę danych do tworzenia artefaktów docelowych dla wszystkich typów zadań danych.
Domyślne ustawienia umieszczania
-
W przypadku korzystania z Data Movement gateway połącz się przez serwer proxy z
W przypadku korzystania z Brama danych ruchu danych można połączyć się z platformą docelową i platformą pomostową (obszarem) za pośrednictwem serwera proxy.
Więcej informacji na temat konfigurowania Brama danych ruchu danych do korzystania z serwera proxy można znaleźć w sekcji Konfigurowanie dzierżawy Qlik Cloud i serwera proxy.
-
Platforma docelowa
InformacjaDostępne w przypadku korzystania z platform Snowflake, Google BigQuery i Databricks. -
Platforma pomostowa
InformacjaDostępne w przypadku korzystania z platform Azure Synapse Analytics, Amazon Redshift i Databricks.
-
Domyślne ustawienia przechowywania
-
Magazyn danych historycznych (typ 2)
Możesz zachować historyczne dane zmian, aby łatwo odtworzyć dane w postaci, w jakiej wyglądały w określonym momencie. Możesz użyć widoków historii i widoków historii na żywo, aby zobaczyć dane historyczne.
-
Widoki na żywo
Widoki na żywo pokazują widok dla każdej wybranej tabeli źródłowej, który łączy tabelę ze zmianami z tabeli zmian. Zapewnia to zapytaniom widok danych na żywo bez konieczności czekania na następny cykl zastosowania.
Domyślna baza danych
Możesz użyć domyślnej bazy danych projektu lub określić inną bazę danych.
Katalog
-
Opublikuj w katalogu
Wybierz tę opcję, aby opublikować tę wersję danych w Katalogu jako zestaw danych. Zawartość katalogu zostanie zaktualizowana przy następnym przygotowaniu tego zadania.
Domyślne ustawienia przekształcania
-
Magazyn danych historycznych (typ 2)
Możesz zachować historyczne dane zmian, aby łatwo odtworzyć dane w postaci, w jakiej wyglądały w określonym momencie. Możesz użyć widoków historii i widoków historii na żywo, aby zobaczyć dane historyczne.
Materializacja
-
Niezmaterializowane (tylko widoki)
Wybierz tę opcję, aby tworzyć tylko widoki, które wykonują przekształcenia w locie.
-
Zmaterializowane (tabele i widoki)
Wybierz tę opcję, aby utworzyć zarówno tabele, jak i widoki.
Domyślna baza danych
Możesz użyć domyślnej bazy danych projektu lub określić inną bazę danych.
Katalog
-
Opublikuj w katalogu
Wybierz tę opcję, aby opublikować tę wersję danych w Katalogu jako zestaw danych. Zawartość katalogu zostanie zaktualizowana przy następnym przygotowaniu tego zadania.
Domyślne ustawienia składnicy danych
Domyślna baza danych
Możesz użyć domyślnej bazy danych projektu lub określić inną bazę danych.
Katalog
-
Opublikuj w katalogu
Wybierz tę opcję, aby opublikować tę wersję danych w Katalogu jako zestaw danych. Zawartość katalogu zostanie zaktualizowana przy następnym przygotowaniu tego zadania.
Domyślne ustawienia zarejestrowanych danych
Domyślna baza danych
Możesz użyć domyślnej bazy danych projektu lub określić inną bazę danych.
Katalog
-
Opublikuj w katalogu
Wybierz tę opcję, aby opublikować tę wersję danych w Katalogu jako zestaw danych. Zawartość katalogu zostanie zaktualizowana przy następnym przygotowaniu tego zadania.
Ustawienia ładowania przyrostowego
Te ustawienia są dostępne, gdy wybrano opcję Przyrostowe przy użyciu górnego limitu.
-
Tabele zmian
Jeśli zmiany znajdują się w tej samej tabeli, wybierz Zmiany znajdują się w tej samej tabeli.
Jeśli nie, odznacz Zmiany znajdują się w tej samej tabeli i określ wzorzec tabeli zmian.
-
Kolumna znacznika
Ustaw nazwę kolumny znacznika w polu Nazwa.
-
Kolumna „Od daty”
Możesz wskazać „Od daty” za pomocą czasu rozpoczęcia lub używając wybranej kolumny.
Jeśli wybierzesz Wybrana kolumna „Od daty”, musisz zdefiniować Wzorzec „Od daty”.
-
Usuwanie nietrwałe
Możesz uwzględnić usuwanie nietrwałe w zmianach, wybierając Zmiany obejmują usuwanie nietrwałe i definiując wyrażenie wskazujące.
Wyrażenie wskazujące powinno mieć wartość True, jeśli zmiana jest usunięciem nietrwałym.
Przykład: ${is_deleted} = 1
-
Obraz przed
Możesz odfiltrować rekordy obrazu przed w zmianach tabel zmian, wybierając Obraz przed i definiując wyrażenie wskazujące.
Wyrażenie wskazujące powinno mieć wartość True, jeśli wiersz zawiera obraz przed aktualizacją.
Przykład: ${header__change_oper} = 'B'
Środowisko wykonawcze
Możesz zdefiniować domyślne ustawienia wydajności środowiska wykonawczego dla zasobów danych uwzględnionych w projekcie.
Domyślne wartości umieszczania
-
Możesz ustawić maksymalną liczbę połączeń z bazą danych w Wykonywanie równoległe.
Domyślne wartości przechowywania
-
Możesz ustawić domyślne ustawienia harmonogramu na harmonogram oparty na czasie. Będzie to wartość domyślna dla każdego utworzonego zadania przechowywania.
-
Możesz ustawić domyślną hurtownię danych, jeśli platformą projektu jest Snowflake.
Domyślne wartości przekształcania
-
Możesz ustawić domyślne ustawienia harmonogramu na harmonogram oparty na czasie lub Po pomyślnym zakończeniu dowolnego zadania danych wejściowych. Będzie to wartość domyślna dla każdego utworzonego zadania przekształcania.
-
Możesz ustawić domyślną hurtownię danych, jeśli platformą projektu jest Snowflake.
Domyślne wartości składnicy danych
-
Możesz ustawić domyślne ustawienia harmonogramu na harmonogram oparty na czasie lub Po pomyślnym zakończeniu dowolnego zadania danych wejściowych. Będzie to wartość domyślna dla każdego utworzonego zadania składnicy danych.
-
Możesz ustawić domyślną hurtownię danych, jeśli platformą projektu jest Snowflake.
Domyślne wartości kopii lustrzanej
-
Możesz ustawić domyślną hurtownię danych, jeśli platformą projektu jest Snowflake.