监控一个 Qlik Open Lakehouse 存储任务
Last updated: 2026/9/1Qlik Open Lakehouse项目中的存储任务与其他项目不同,因为它持续运行,而不是以批处理模式运行。因此,监视指标也不同。
一般监控概览
监控视图可让您跟踪任务状态和指标:
-
选项卡
切换 信息、全量加载 和 变更处理 以查看任务每个阶段的相关指标。
-
数据集状态筛选器
数据集表上方的一个条形图显示了每个状态下的数据集数量:排队中、加载中、已完成和错误。该图表随着数据集状态的变化而动态更新。点击一个状态段,可筛选数据集表,仅显示该状态下的数据集。
-
隐藏小组件
点击 隐藏小组件 以收起指标小组件。这提供了更多空间来查看下面的数据集表。
-
开始日期
当前任务运行开始的日期和时间。
-
结束日期
任务运行结束的日期和时间。这仅针对已完成的任务运行显示。
-
运行历史记录
点击运行历史记录以查看以前任务运行的列表及其结果。
信息监控详细信息
该 信息 部分提供了整体任务状态的摘要:
-
运行
显示当前运行的 运行 ID。
-
数据
数据任务已更新为 显示最旧视图更新到的时间。它表示所有在该时刻之前提交的源更改都已在目标表中可用的最新时间点。
如果未检测到新的源更改,此值将设置为当前时间。
-
任务
显示此任务正在运行的集群的名称和状态,以及常规任务信息和状态。
满负载监视详细信息
您可以查看处于全量加载的数据任务的以下统计信息:
-
数据集总数
已加载的数据集数量。
-
出错的数据集
出错的数据集数量。
-
传入的更改
传入更改的数量。
-
总延迟
当前任务的延迟 (hh:mm:ss)。此持续时间表示从变更在源中可用时起,到变更应用到目标并可用为止的时间。
您可以查看数据任务中每个表的以下详细信息:
-
名称
目标表的名称。
-
州
表状态将为:已排队、正在加载、已完成或错误。
-
已启动
加载开始的时间。
-
结束
加载结束的时间。
-
持续时间
hh:mm:ss 格式加载的持续时间。
-
记录
加载期间复制的记录数。
-
信息
如果加载未成功处理,则显示错误消息。
更改处理监视详细信息
您可以查看数据任务的以下详细信息,以监控 更改处理 下的更改处理:
-
数据集总数
已加载的数据集数量。
-
出错的数据集
出错的数据集数量。
-
传入的更改
传入更改的数量。
-
已处理的变更集
已处理的更改数量。
-
总延迟
当前任务的延迟 (hh:mm:ss)。此持续时间表示从变更在源中可用时起,到变更应用到目标并可用为止的时间。
您可以查看数据任务中每个表的以下详细信息:
-
名称
登陆资产中目标表的名称。
-
州
表格状态将为:累积更改或错误。
-
传入更改
由登陆任务处理的、正在等待存储任务应用的更改数量。
-
处理的更改
自数据集上次完全加载(通过初始满负载或重新加载操作)以来,已应用于目标的更改总数。
-
上次处理
插入到目标数据集的最后源数据时间,已转换为本地时间。
-
未优化的更改
可通过视图查询但尚未合并到优化的 Iceberg 分区中的记录数量。高计数可能会影响性能,直到后台优化完成。
这反映了当前在更改分区中尚未应用于当前或历史分区的记录数量。
如果此数字持续很高,请考虑增加集群计算容量以加速优化。
信息注释持续高企或不断攀升的值通常意味着传入更改的速度超过了优化周期 — 下一批更改在上一批更改完成优化之前不断到来。这不表示优化失败或停止,也不影响数据正确性。
如果此问题持续存在,可能需要检查以下事项:
-
增加集群计算容量以加速优化。
-
审查主键 — 一个将更新集中在一小组行上的键会增加变动。
-
-
信息
如果对表的更改失败且未处理,则显示错误消息。
查看运行历史记录
您可以查看任务的运行历史记录,以确定根本原因并了解随时间推移而呈现的模式。
-
在任务的 监控 视图中,单击 运行历史记录。
-
在 监控视图 中,单击任务的 ... 菜单中的 运行历史记录。
根据您的筛选选择,运行历史记录中最多显示 100 次执行。优化您的筛选条件以查看其他执行。您可以根据执行结束日期和任务状态进行筛选。运行信息保留 13 个月。运行中的数据集元数据保留 30 天。