跳到主要內容 跳至補充內容

用於分析的資料

「用於分析的資料」指標顯示您的 Qlik Cloud 容量有多少正在使用中。這衡量載入並儲存到您環境中的資料總量。本主題說明哪些資料類型計入您的使用量、哪些已排除,以及如何計算使用量。了解這些詳細資訊可協助您了解哪些內容占用您的 Qlik Cloud 容量,並更有效率地管理您的資料。

指標中包含的資料

計入的資料如下:

  • 從外部來源載入到 Qlik Cloud 中的資料。對於載入,新的增量資料會增加資料計數。若載入有較少的資料,資料計數會減少。

  • 上傳至 Qlik Cloud 或在其中建立的資料檔案。會計入檔案大小。若您在 Qlik Cloud 內複製資料檔案,計數中會納入新的資料檔案。如果您在共用空間中複製應用程式而不載入,則不會計入。

資料分析指標計算為:

  • 透過 Qlik Sense 應用程式擷取到 Qlik Cloud 的外部資料量。

  • 從透過 Qlik 資料閘道 - 資料移動 載入到 Qlik Cloud 之外部資料產生的 QVD 檔案大小。

  • 上傳至 Qlik Cloud 的資料檔案的檔案大小。

  • 靜態位元組應用程式大小。

載入到多個租用戶的資料會計入多次,而載入一次並用於多個應用程式的資料只會計入一次。

資訊備註如果應用程式僅使用從資料檔案載入的資料,則該應用程式將不會為分析提供資料。這是因為已經在資料檔案參與時考慮了該資料。

以下各項不計入指標:

  • 使用隨選應用程式產生 (ODAG) 載入到個人空間的應用程式和資料。

  • 個人空間中的應用程式。包括使用儲存在共用空間中之資料連線的人。

  • 僅以二進位載入另一個應用程式的應用程式。以二進位載入的原始應用程式已計算在內。

  • 僅載入 QVD 檔案的應用程式。QVD 已經獨立計入。

  • 發佈到受管理空間的應用程式和資料。

    資訊備註受管理空間中應用程式的載入也會計入該指標。
  • 透過 Direct Query 載入的資料。

訂閱分析用資料容量

您根據分析用資料需求訂閱資料套件。每個使用者在其個人空間中都有一定數量的分析用資料可用容量。此個人資料不會計入分析用資料總量。不過,若使用者將資料移動至共用空間以進行共同作業,則會納入容量總計。

Qlik Cloud 分析 入門版有固定資料容量。在此版本中,訂閱基於使用者的數量。

將資料移至 Qlik Cloud

您移動資料的選項包括:

  • 來自 Qlik Sense 的直接資料連線

  • Qlik 資料閘道 - 直接存取

  • 資料透過 Qlik Talend Data Integration 移至 Qlik Cloud

    您可以透過進階和企業版的 Qlik Cloud 分析 將資料從任何來源移至 Qlik Cloud。透過 Qlik Cloud 分析標準版,您可以從除了 SAP、主機和舊版來源以外的任何來源移動資料。

計算分析用資料量

理解如何計算分析用資料可協助您有效率地使用容量。本區段說明如何衡量每月峰值、資料載入、應用程式載入和資料建立。

每月峰值

當您購買分析用資料容量時,您將獲得一定數量用於儲存和分析資料的空間。此容量是最大限制,而不是可取用的額度。例如,如果您購買 250 GB 的容量,您可以隨時儲存和分析最多 250 GB 的資料。如果超過此限制,可能會出現超額情況,並另外受到追蹤。

如何追蹤每日使用情況

每天都會追蹤您的使用情況。每天,系統都會計算您的每日峰值,總計如下:

  • 儲存的檔案總大小

  • 應用程式載入期間擷取的資料量

  • 衍生或建立的資料量

結轉行為

如果某一天沒有發生載入,系統將結轉最近一次載入時擷取的資料值。在新的月份開始時,每月的峰值會重設。如果新月份第一天沒有載入,則上個月的最後載入值將套用於該日。

儲存的資料和衍生的資料一律每天都會進行最新衡量,不會結轉。

特殊情況

  • 使用值反映了每個應用程式上次成功載入的情況。如果應用程式稍後使用空的資料模型載入 (例如,僅用於建立和匯出 QVD 檔案),則報告的使用情況可能仍會顯示上次成功載入的大小。

  • 只有當應用程式再次載入時,使用值才會更新。這可能會導致應用程式中可見的資料與報告的分析用資料的使用情況之間存在差異。為了減少報告的使用量,請使用較小的資料集載入應用程式。

結轉範例

以下範例顯示,若沒有發生新的載入,如何結轉載入值,以及此行為如何與儲存和建立的資料互動。

範例 1 – 一般結轉

  • 第 1 天:已儲存 70 GB 資料檔案,已載入 40 GB 應用程式,已建立 30 GB 資料檔案。每日峰值為 140 GB。

  • 第 2 天:已儲存 60 GB 資料檔案,已載入 0 GB 應用程式,已建立 20 GB 資料檔案。第 1 天的載入值 (40 GB) 將結轉至下一天。每日峰值為 120 GB。

範例 2 – 僅限 QVD 的應用程式情境

  • 第 1 天:使用 10 GB 外部資料載入應用程式,建立 QVD 檔案,捨棄所有表格。最終的應用程式模型是空的。每日峰值為 10 GB (載入部分)。

  • 第 2 天:沒有發生載入。儘管該應用程式現在沒有表格,但每日峰值仍保持 10 GB (載入部分結轉)。

只有新的載入才能更新此值。

這表示,每日峰值可以反映結轉的載入資料 (即使應用程式本身是空的,例如僅限 QVD 的情境) 以及當天任何新儲存或建立的資料。

每月峰值和高水位線

每月峰值是該月記錄的最高每日峰值。這作為高水位線,顯示您的資料使用總量最高的一天。比較每月峰值與您購買的容量,以判定是否適用超額費用。

範例 – 根據每日使用情況識別每月峰值

為了示範如何確定每月峰值,此範例使用了簡化的情境,僅涵蓋四天,購買容量為 250 GB。使用值有助於說明最高每日峰值如何成為每月峰值。

表格按類型呈現了四天內的資料使用情況:

已儲存 載入 已建立 每日峰值
1 50 GB 30 GB 15 GB 95 GB
2 70 GB 40 GB 30 GB 140 GB
3 60 GB 0 GB 20 GB 120 GB
4 80 GB 50 GB 40 GB 170 GB

理解表格資料:

  • 第 3 天沒有資料載入。第 2 天的載入部分 (40 GB) 將結轉並計入每日峰值 (120 GB)。

  • 第 4 天的最高每日峰值 (170 GB),成為每月峰值。

由於每月峰值在 250 GB 的購買容量範圍內,因此不適用超額。如果任何一天的使用量超過 250 GB,則可能需要支付超額費用或進行容量升級。

四天的每日使用情況,顯示儲存、擷取 (載入) 和建立的資料。綠線標記了 250 GB 的購買容量。

顯示四天資料使用情況的長條圖

將資料載入到 Qlik Cloud

從外部來源載入到 Qlik Cloud 的資料會計入每日峰值。將資料載入到租用戶時,會計入一次,並且可以分析並使用多次。載入到多個租用戶的資料會計入多次。

資料對每日峰值的影響衡量如下:

  • 透過 Qlik Sense 應用程式載入的檔案式資料透過檔案大小來衡量。

  • 使用查詢或連接器的應用程式載入會計為從資料來源擷取的位元組上限。若同一天發生多個載入,最大的應用程式大小將會計入每日峰值。例如,若在一天當中分別以 0.75 GB、1.25 GB 和 1 GB 載入應用程式,則用於該日的值會是 1.25 GB。

    只要 Qlik Cloud 租用戶中存在應用程式,就會為該應用程式評估擷取的位元組上限。

  • 會依產生的 QVD 檔案大小衡量透過 Qlik 資料閘道 - 資料移動 載入到 Qlik Cloud 的資料。

  • 分析 活動中心內或使用 qlik-cli 透過檔案匯入上傳或載入的應用程式,會透過應用程式的靜態位元組大小來衡量。

  • 上傳的 QVD 檔案會透過其檔案大小來衡量。

將資料載入到 Qlik Cloud 的不同方式:透過應用程式、資料移動或是使用 分析 活動中心或 qlik-cli 匯入。

將資料載入到 Qlik Cloud 的不同方法說明。

在下列情況下,資料納入每日峰值的計算:

  • 只要限制在該空間中,就不會計入載入到使用者個人空間中的資料。若使用者將資料移動至共用空間,以與其他人共同作業,則會計入。

  • 若載入失敗,不會計入擷取的位元組。不過,會計入任何產生的 QVD 檔案。

  • 載入具有已位於 Qlik Cloud 之資料的應用程式時,不會計入資料載入。例如,已複製或二進位載入 (從另一個 Qlik Sense 應用程式載入資料) 不會影響每日峰值,前提是沒有從外部來源載入。

從內部來源進行的應用程式載入不會影響每日峰值。

不會計入每日峰值的應用程式載入說明。

衡量為應用程式載入擷取的位元組

從外部來源載入 Qlik Sense 應用程式時,下列情況適用:

  • 您可以從相同的來源資料集載入應用程式多次,而不影響每日峰值,只要資料量保持不變即可。

  • 若來源資料集大小增加,就會影響每日峰值。每個新增至資料集的額外資料 GB 等同於載入期間擷取的資料量。

  • 反過來說,若來源資料集大小減少,此減少也會反映在每日峰值。例如,若資料集大小減少 0.25 GB,則載入大小會減少相同的量。不過,若 1 GB 載入發生在當天更早的時候,該日的每日峰值會是 1 GB。減少只會反映在次日的每日峰值。

  • 來源資料集的內容變更 (沒有改變其大小) 不會影響每日峰值。每日峰值只會受到資料量影響。

在變更來源資料集的內容大小時衡量擷取的位元組。

來自不同大小資料集的應用程式載入說明。
  • 若您在單一載入指令碼內查詢相同的資料集多次,會獨立計入所有這些查詢,並加總其資料量。例如,若您的載入指令碼包括三次 1 GB 的查詢,每次都來自相同的資料集,則會個別計入全部三次查詢。因此,計入每日峰值的總資料量為 3 GB。

  • 載入應用程式並在之後捨棄表格不會減少每日峰值,因為每日峰值是基於該日的應用程式載入大小上限。

  • 若您載入應用程式,然後在同一天刪除,仍會影響該日的每日峰值。不過,若應用程式不再存在,這會減少次日的每日峰值。

衡量為不同的應用程式載入情境擷取的位元組。

不同的應用程式載入情境說明。

衡量透過 Qlik Talend Data Integration 載入到 QVD 檔案的資料

使用 Qlik 資料閘道 - 資料移動 將資料從外部來源載入到 QVD 檔案時,下列情況適用:

  • 您可以上傳、匯入或產生資料集多次,而不影響每日峰值,只要資料量保持不變即可。

  • 若來源資料集大小增加,就會影響每日峰值。每個新增至資料集的額外資料 GB 等同於產生的 QVD 檔案大小的量。

  • 反過來說,若來源資料集大小減少,此減少也會反映在每日峰值。例如,若資料集大小減少 0.25 GB,則產生的 QVD 檔案大小會減少相同的量。

  • 來源資料集的內容變更 (沒有改變其大小) 不會影響每日峰值。每日峰值只會受到資料量影響。

在變更來源資料集的內容大小時衡量 QVD 檔案大小。

來自不同大小資料集的 QVD 載入說明。

從外部和內部來源載入應用程式

理解載入到應用程式的資料如何根據資料來源影響每日峰值很重要。現在來考慮下列從不同來源載入資料的情境。

  • 從外部來源載入應用程式

    將資料從外部來源載入到應用程式時,會計為擷取的位元組。例如,若您載入 10 GB,所占的每日峰值為 10 GB。

  • Qlik Cloud 中的 QVD 載入應用程式

    將資料從位於 Qlik Cloud 的 QVD 檔案載入到應用程式不會計入每日峰值。若 10 GB 資料從 QVD 載入到應用程式中,則不會計入該資料,因為沒有擷取外部資料。所占的每日峰值為 0 GB。

  • Qlik Cloud 中的 QVD 產生新的 QVD 檔案

    從基於 Qlik Cloud 的 QVD 載入到 QVD 產生器應用程式的資料不會計入每日峰值。不過,會計入從應用程式產生的 QVD 檔案。例如,若 10 GB QVD 檔案轉換為新的 5 GB QVD,則所占的每日峰值是兩個檔案的總和,即 15 GB。因為沒有外部資料擷取,不會計入 QVD 產生器應用程式 (建立資料模型並產生 QVD 的專用應用程式) 的載入。

  • 從外部和內部來源載入應用程式

    若應用程式從外部來源載入 10 GB,並從 Qlik Cloud 內的 QVD 載入 5 GB,從應用程式所占的每日峰值總計為 10 GB,因為只會計入從外部來源載入的資料。

衡量資料檔案總數加上從內部和外部來源載入時取用的資料。

計算載入資料總數的範例說明。

Qlik Cloud 中建立資料

Qlik Cloud 中建立新的資料時,無論是複製資料檔案或透過合併和處理現有原始資料來衍生,都會計入每日峰值。衡量資料作為資料建立流程期間產生的檔案總大小。無論有多少應用程式使用,建立的資料只會計入一次。

考慮這些資料建立範例:

  • 使用 STORE 陳述式建立 1 GB QVD 檔案會將 1 GB 新增至每日峰值。

  • 複製 1 GB QVD 檔案會將 1 GB 新增至每日峰值,因為兩個副本都會影響總計。

  • 透過轉換建立 0.5 GB QVD 檔案會將 0.5 GB 新增至每日峰值。只會計入產生的 QVD 檔案;不會計入 QVD 產生器應用程式,因為這載入已在 Qlik Cloud 中的資料。

衡量在 Qlik Cloud 中建立的資料檔案。

計算建立資料總數的範例說明。

管理資料的最佳做法

有效的資料管理可協助您充分利用「用於分析的資料」容量。以下建議涵蓋如何最佳化資料載入、減少不必要的儲存,以及管理 Qlik Cloud 中舊有或非作用中的內容。

建立 QVD 檔案以便重複使用資料

當資料在多個應用程式之間共用時,請使用 QVD 檔案。載入外部資料一次並將其儲存為 QVD 可減少重複擷取,並有助於降低每日尖峰。透過 Qlik 資料閘道 - 資料移動 建立 QVD 檔案以便重複使用資料,整體上比將資料直接載入到應用程式中更有效率。

範例:

如果您載入 10 GB 的外部資料一次並將其儲存為 5 GB 的 QVD 檔案,則計入每日尖峰的總資料為 15 GB。載入 5 GB QVD 的應用程式不會重新擷取原始的 10 GB。如果您改為將相同的 10 GB 外部資料直接載入到兩個應用程式中,則會發生兩次擷取,導致計入 20 GB。

相較於將外部資料直接載入到多個應用程式中,從中建立 QVD 並載入應用程式更有效率。

說明顯示使用 QVD 進行應用程式載入時以及直接載入到應用程式時的資料總計。

使用有效率的資料載入方法

盡可能將篩選和轉換推送到資料來源 (SQL 下推)。這會減少載入期間傳輸的資料量。

範例:

Select * from my-external-database-table where my_column = 10

在此查詢中,篩選條件是在來源處套用,因此只會傳輸資料的子集。

資訊備註載入 QVD、Excel 或 CSV 檔案時,會在從來源讀取檔案後進行篩選,因此一律會計入完整的檔案大小。

為大型資料集使用隨選應用程式

隨選應用程式產生 (ODAG) 可讓您先載入彙總資料,然後僅在需要時擷取詳細子集,藉此處理大型資料集。

如需詳細資訊,請參閱On-demand 應用程式

透過 Direct Query 和動態檢視處理大型資料集

Direct Query 和動態檢視可讓您隨選查詢大型資料集,而無需將所有資料載入到記憶體中。這些方法可減少擷取,並有助於將使用量維持在您的容量範圍內。

如需詳細資訊,請參閱:

管理舊有或未使用的應用程式

租用戶中的應用程式會根據其上次成功載入,繼續計入用於分析的資料使用量。只要應用程式存在並載入其資料,就會持續計入您的容量報告。

若要避免不必要的使用量:

減少或移除不必要的資料

從不再需要完整資料集的應用程式中移除資料,或在只需要結構時建立不含資料的應用程式。使用較小的資料集載入應用程式會更新其報告的使用量。

避免不必要的重複

僅在需要時複製應用程式。每個副本都視為一個獨立的應用程式,並會占用容量。

有意地使用共用空間

共用空間有助於控制載入的位置和方式。

刪除您不再需要的應用程式

定期清理可防止過時內容取用容量。

  • 檢查上次更新檢視者用於,以識別目錄中未使用的項目。

  • 使用影響分析和譜系來了解資料檔案的使用位置。

  • 從活動中心刪除未使用的應用程式和資料檔案。管理員也可以從「管理」刪除應用程式。

如需詳細資訊,請參閱:

減少與載入相關的取用

應用程式報告的載入大小僅在載入產生較小的資料集時才會減少。若要減少報告的大小,請載入資料較少的應用程式,以便更新報告的大小。

應用程式載入行為

  • 如果應用程式在沒有新資料的情況下載入,報告的大小會保持不變。

  • 當應用程式複製到另一個空間時,會視為一個獨立的應用程式,並再次計入容量使用量。

限制載入相關取用的方法

您可以使用下列兩種方法之一,減少與載入相關的資料取用。這兩種方法都會從應用程式中移除資料。

  • 提早停止載入指令碼:在載入指令碼的開頭新增 Exit script; 陳述式,以載入不含資料的應用程式。當需要完整資料時,請註解排除陳述式或套用條件,使其僅在特定情境下執行 (例如,當應用程式位於特定空間時)。

  • 重新建立不含資料的應用程式:下載不含資料的應用程式,並將其匯入為新的應用程式。驗證新版本後,刪除原始應用程式。

此頁面是否對您有幫助?

若您發現此頁面或其內容有任何問題——錯字、遺漏步驟或技術錯誤——請告知我們!