監控 Qlik 開放湖倉庫 儲存任務
Qlik 開放湖倉庫 專案中的儲存任務與其他專案不同,因為這是連續執行,而不是以批次模式執行。因此,監控指標也不同。
一般監控詳細資訊
此區段提供整體任務狀態的摘要:
-
資料任務已更新為
所有表格完全同步的時間戳記。這代表最新的時間點,在該時刻之前認可的所有來源變更都已經可用於目標表格。
如果沒有偵測到新的來源變更,則此值設定為目前時間。
-
資料集數量
此任務中包含的資料集總數。
-
資料集發生錯誤
此任務中遇到錯誤的資料集總數。
-
湖存放庫叢集
執行此任務之叢集的名稱和狀態。
完整載入監控詳細資訊
您可在完整載入狀態中檢視資料任務的以下詳細資訊:
-
已排入佇列:目前排入佇列的表格數量。
-
正在載入:目前載入中的表格數量。
-
已完成:已完成的表格數量。
-
錯誤:發生錯誤的表格數量。
您可以檢視資料任務中每個表格的下列詳細資訊:
-
名稱
目標表格的名稱。
-
狀態
表格狀態將會是:已排入佇列、載入中、已完成或錯誤。
-
已開始
開始載入的時間。
-
已結束
結束載入的時間。
-
持續時間
載入的持續時間,格式為 hh:mm:ss。
-
記錄
載入時所複寫的記錄數量。
-
訊息
在未成功處理載入時顯示錯誤訊息。
變更資料擷取 (CDC) 監控詳細資訊
您可在 CDC 狀態中檢視資料任務的以下 CDC 詳細資訊,以監控變更處理:
-
即將進行的變更:存在於來源處,等待處理的變更數量。您可檢視累積的數量,以及套用的數量。
-
已處理變更:已處理並且套用的變更數量 (過去 24 小時內)。
-
延遲:尚未處理以儲存的最早登陸來源事件時間戳記與目前時間之間的時差。 (hh:mm:ss)。這段持續時間表示自變更在來源處可用起,至套用變更、在登陸資產可用為止的時間。
您可以檢視資料任務中每個表格的下列詳細資訊:
-
名稱
登陸資產中的目標表格名稱。
-
狀態
表格狀態將會是:累積變更中或錯誤。
-
即將進行的變更
登陸任務所處理、正在等待儲存任務套用的變更數量。
-
已處理變更
自資料集上次完整載入 (透過初始完整載入或載入動作) 以來套用於目標的變更總數。
-
上次處理
插入到目標資料集的最後一個來源資料時間,轉換為當地時間。
-
取消最佳化的變更
可透過檢視查詢、但尚未合併至最佳化 Iceberg 分割的記錄數量。在背景最佳化完成之前,高計數可能會影響效能。
這反映了目前變更分割中尚未套用於目前或歷史記錄分割的記錄數量。
如果這個數字一直很高,請考慮增加叢集運算能力以加速最佳化。
-
訊息
若對表格進行變更時失敗而未處理,會顯示錯誤訊息。