監控 Qlik 開放湖倉庫 儲存工作
Qlik 開放湖倉庫 專案中的儲存工作與其他專案不同,因為它是持續執行,而不是以批次模式執行。因此,監控指標會有所不同。
一般監控概述
監控檢視可讓您追蹤工作狀態和指標:
-
索引標籤
在 資訊、完整載入 和 變更處理 之間切換,以檢視工作每個階段的相關指標。
-
資料集狀態篩選器
資料集資料表上方的橫條圖會顯示每個狀態中的資料集數量:已排隊、載入中、已完成 和 錯誤。此圖表會隨著資料集狀態變更而動態更新。按一下狀態區段可篩選資料集資料表,以僅顯示該狀態下的資料集。
-
隱藏小組件
按一下 隱藏小組件 可摺疊指標小組件。這可提供更多空間來檢視下方的資料集資料表。
-
開始日期
目前工作執行開始的日期和時間。
-
結束日期
工作執行結束的日期和時間。這僅針對已完成的工作執行顯示。
-
執行歷程記錄
按一下 執行歷程記錄 可檢視先前工作執行及其結果的清單。
資訊監控詳細資訊
資訊區段提供整體工作狀態的摘要:
-
執行
顯示目前執行的 執行 ID。
-
資料
資料工作已更新至會顯示最舊檢視更新的時間。它代表截至該時刻提交的所有來源變更都已在目標資料表中可用的最新時間點。
如果未偵測到新的來源變更,此值將設定為目前時間。
-
工作
顯示此工作執行所在叢集的名稱和狀態,以及一般工作資訊和狀態。
完整載入監控詳細資訊
您可以在 完整載入 中檢視資料工作的以下統計資料:
-
資料集總數
已載入的資料集數量。
-
出錯的資料集
處於錯誤狀態的資料集數量。
-
傳入變更
傳入變更的數量。
-
總延遲
工作的目前延遲 (hh:mm:ss)。此持續時間代表從來源中可取得變更,到套用變更且在目標中可取得變更之間的時間。
您可以檢視資料工作中每個資料表的以下詳細資訊:
-
名稱
目標資料表的名稱。
-
狀態
資料表狀態將為以下之一:已排隊、載入中、已完成或錯誤。
-
已開始
開始載入的時間。
-
已結束
結束載入的時間。
-
持續時間
載入的持續時間,格式為 hh:mm:ss。
-
記錄
載入期間複寫的記錄數量。
-
訊息
如果載入未成功處理,則顯示錯誤訊息。
變更處理監控詳細資訊
您可以在 變更處理 中檢視資料工作的以下詳細資訊,以監控變更處理:
-
資料集總數
已載入的資料集數量。
-
出錯的資料集
處於錯誤狀態的資料集數量。
-
傳入變更
傳入變更的數量。
-
已處理的變更
已處理變更的數量。
-
總延遲
工作的目前延遲 (hh:mm:ss)。此持續時間代表從來源中可取得變更,到套用變更且在目標中可取得變更之間的時間。
您可以檢視資料工作中每個資料表的以下詳細資訊:
-
名稱
登陸資產中目標資料表的名稱。
-
狀態
資料表狀態將為以下之一:累積變更或錯誤。
-
傳入變更
由登陸工作處理、正等待由儲存工作套用的變更數量。
-
已處理的變更
自上次完全載入資料集以來 (透過初始完整載入或透過重新載入動作) 套用至目標的變更總數。
-
上次處理時間
插入至目標資料集的最後一個來源資料時間,已轉換為本地時間。
-
未最佳化的變更
可透過檢視進行查詢,但尚未合併至最佳化 Iceberg 分割區的記錄數量。在背景最佳化完成之前,高計數可能會影響效能。
這反映了目前在 變更分割區 中、尚未套用至 目前 或 歷程記錄 分割區的記錄數量。
如果此數值持續偏高,請考慮增加叢集運算容量以加速最佳化。
-
訊息
如果對資料表的變更失敗且未處理,則顯示錯誤訊息。
檢視執行歷程記錄
您可以檢視任務的執行歷程記錄,以識別根本原因並瞭解一段時間內的模式。
-
在任務的 監控 檢視中,按一下 執行歷程記錄。
-
在 監控檢視 中任務的 ... 功能表中,按一下 執行歷程記錄。
根據您的篩選條件選擇,執行歷程記錄中最多會顯示 100 次執行。精簡您的篩選條件以查看其他執行。您可以根據執行結束日期和任務狀態進行篩選。執行資訊會保留 13 個月。執行中的資料集中繼資料會保留 30 天。