資料管道專案設定
您可以在 Qlik Talend Data Integration 中變更資料管道專案的設定。這些屬性是專案和所有包含的資料任務所共有的。某些設定僅適用於特定的資料平台。
-
按一下專案中的 設定。
資料平台
您可以變更下列設定:
-
連線
專案的連線。
-
連線至預備區
當資料平台為 Snowflake 時,無法使用此選項。
中繼資料
您可以為內部成品設定後置詞,並為建立的檢視設定預設後置詞。
-
內部成品偏好設定
在 結構描述後置詞 中設定用於儲存內部成品的結構描述所使用的後置詞。
-
外部檢視後置詞
為專案中包含的資料任務所建立的檢視設定預設後置詞。
-
雜湊
您可以設定在對欄進行雜湊處理時要使用的雜湊鹽字串,例如用於遮罩敏感資訊。這將在將輸入欄與雜湊鹽字串串接後,產生輸入欄的 SHA-256 雜湊。
您可以使用專案 ID 作為鹽字串,或設定自訂鹽字串。
資訊備註此設定僅適用於 Qlik 開放湖倉庫 專案。雜湊函數可用於串流登陸任務。
新任務的預設設定
您可以為專案中建立的資料任務設定預設值。建立資料任務時,您可以變更該值。
您可以設定預設資料庫,以建立所有類型資料任務的目標成品。
登陸預設設定
-
使用 Data Movement gateway 時,透過 Proxy 連線至
使用 資料移動閘道 時,您可以透過 Proxy 連線至目標平台和預備平台 (區域)。
如需有關設定 資料移動閘道 以使用 Proxy 伺服器的詳細資訊,請參閱 設定 Qlik Cloud 租用戶和 Proxy 伺服器。
-
目標平台
資訊備註在使用 Snowflake、Google BigQuery 和 Databricks 時可用。 -
預備平台
資訊備註在使用 Azure Synapse Analytics、Amazon Redshift 和 Databricks 時可用。
-
儲存預設設定
-
歷史資料存放區 (類型 2)
您可以保留歷史變更資料,讓您輕鬆重新建立特定時間點的資料樣貌。您可以使用歷史檢視和即時歷史檢視來查看歷史資料。
-
即時檢視
即時檢視會顯示每個所選來源資料表的檢視,該檢視會將資料表與變更資料表中的變更合併。這為查詢提供了資料的即時檢視,而無需等待下一個套用週期。
預設資料庫
您可以使用專案的預設資料庫或指定另一個資料庫。
目錄
-
發佈至目錄
選取此選項可將此版本的資料作為資料集發佈至 目錄。下次準備此任務時,將會更新目錄內容。
轉換預設設定
-
歷史資料存放區 (類型 2)
您可以保留歷史變更資料,讓您輕鬆重新建立特定時間點的資料樣貌。您可以使用歷史檢視和即時歷史檢視來查看歷史資料。
具體化
-
非具體化 (僅限檢視)
選取此選項以僅建立即時執行轉換的檢視。
-
具體化 (資料表和檢視)
選取此選項以建立資料表和檢視。
預設資料庫
您可以使用專案的預設資料庫或指定另一個資料庫。
目錄
-
發佈至目錄
選取此選項可將此版本的資料作為資料集發佈至 目錄。下次準備此任務時,將會更新目錄內容。
資料超市預設設定
預設資料庫
您可以使用專案的預設資料庫或指定另一個資料庫。
目錄
-
發佈至目錄
選取此選項可將此版本的資料作為資料集發佈至 目錄。下次準備此任務時,將會更新目錄內容。
已註冊資料預設設定
預設資料庫
您可以使用專案的預設資料庫或指定另一個資料庫。
目錄
-
發佈至目錄
選取此選項可將此版本的資料作為資料集發佈至 目錄。下次準備此任務時,將會更新目錄內容。
增量載入設定
當選取 使用高水位線的增量 時,可以使用這些設定。
-
變更資料表
如果變更在同一個資料表中,請選取 變更在同一個資料表內。
如果不是,請取消選取 變更在同一個資料表內 並指定變更資料表模式。
-
水位線欄
在 名稱 中設定水位線欄的名稱。
-
「開始日期」欄
您可以透過開始時間或使用選取的欄來指出「開始日期」。
如果您選取 選取的「開始日期」欄,則必須定義 「開始日期」模式。
-
軟刪除
您可以透過選取 變更包含軟刪除 並定義指示運算式,將軟刪除包含在變更中。
如果變更是軟刪除,則指示運算式的評估結果應為 True。
範例:${is_deleted} = 1
-
前置映像
您可以透過選取 前置映像 並定義指示運算式,在變更資料表變更中過濾掉前置映像記錄。
如果該列包含更新前的映像,則指示運算式的評估結果應為 True。
範例:${header__change_oper} = 'B'
執行階段
您可以為專案中包含的資料資產定義預設執行階段效能設定。
登陸預設值
-
您可以在 平行執行 中設定資料庫連線的最大數量。
儲存預設值
-
您可以將預設排程設定為以時間為基礎的排程。這將是每個建立的儲存任務的預設值。
-
如果專案平台為 Snowflake,您可以設定預設資料倉儲。
轉換預設值
-
您可以將預設排程設定為以時間為基礎的排程,或 在成功完成任何輸入資料任務時。這將是每個建立的轉換任務的預設值。
-
如果專案平台為 Snowflake,您可以設定預設資料倉儲。
資料超市預設值
-
您可以將預設排程設定為以時間為基礎的排程,或 在成功完成任何輸入資料任務時。這將是每個建立的資料超市任務的預設值。
-
如果專案平台為 Snowflake,您可以設定預設資料倉儲。
鏡像預設值
-
如果專案平台為 Snowflake,您可以設定預設資料倉儲。