监控和运行您的数据任务
您可以使用监控视图来监控和运行数据任务的状态和进度。监控视图允许您根据筛选器查看您在租户中有权监控的一部分数据任务的状态。您可以创建多个视图来监控数据管道的不同方面。
-
导航至 数据集成 > 监控视图以显示监控视图。
除了创建自定义监控视图外,您还可以使用预置的 所有任务 视图来显示所有项目中所有可运行的数据任务。
监控单个数据任务
您可以通过在数据任务窗口左上角的下拉菜单中选择 监控 来监控单个数据任务的状态和进度。
监控 Qlik Open Lakehouse 存储任务
Qlik Open Lakehouse 项目中的存储任务是连续运行的,而不是批处理。因此,相关的监控指标也会相应有所不同。
设置操作更改通知
您可以设置通知,以便在数据管道运行发生变化时收到警报。您可以在浏览器中、通过电子邮件或向 Qlik Analytics 移动应用程序发送推送消息来获取通知。
数据任务故障排除
本部分介绍了在使用数据任务时可能出现的问题以及如何进行故障排除。
创建新监控视图
创建自定义监控视图以开始监控您的数据任务。
-
单击 创建新项 并选择 监控视图。
-
输入监控视图的名称和描述,选择要在其中创建该视图的空间,然后在准备就绪时单击 创建。
系统将显示该监控视图。
-
监控视图最初会显示所有项目中的所有数据任务。
使用筛选器创建包含您要监控的任务的视图。筛选器列表将仅包含您有权列出的资源。
以下筛选器可用:
-
项目
您可以选择一个或多个空间中的所有项目、选择单个项目,或结合使用两者。
-
任务类型
-
任务世系
显示所选任务的上游任务世系。
例如,您可以选择来自不同项目的集市。这将监控影响所选数据集市的所有上游数据任务。
-
任务影响
显示受所选任务影响的所有下游任务。
例如,您可以选择处于错误状态的登陆数据任务。这将监控受所选登陆数据任务影响的所有下游数据任务。
提示注释您可以结合使用 任务世系 和 任务影响 筛选器。例如,您可以监控属于您感兴趣的所选数据集市世系中的所有数据任务,并且这些任务受到处于错误状态的所选登陆任务的影响。 -
数据网关
显示通过所选 数据移动 网关之一执行操作的所有数据任务。此类任务可以是:
- 移动数据的任务,例如登陆任务或复制任务
- 提取、加载和转换数据且在无法从 Qlik Cloud 直接访问的数据平台上运行的任务。此类任务可以是存储任务、转换任务、注册任务和数据集市任务。
选择 不使用数据网关 以查看未使用数据网关的任务。这将是在可从 Qlik Cloud 直接访问的数据平台上运行的任何 ELT 任务。
信息注释与已删除网关关联的任务将不再匹配 数据网关 筛选器。为了查看此类任务,您应该清除 数据网关 筛选器选择。 -
数据平台/目标
显示具有所选数据平台(数据管道任务)或目标(复制任务)的任务。
-
源
显示具有所选数据源的数据移动任务。根据使用场景,数据移动任务可以是以下任意一种:
- 数据管道使用场景: 登陆任务
- 复制使用场景: “Replicate 数据”任务或“在数据湖中登陆数据”任务
-
Lakehouse 集群
显示在所选 Lakehouse 集群上运行的数据移动任务。
信息注释Lakehouse 集群筛选器仅适用于 Qlik Open Lakehouse 项目。 -
所有者
例如,在 项目 下的 空间中的所有项目: 中选择一个空间,并在 任务类型 中选择 登陆。这将创建一个视图,您可以在其中查看所选空间中所有项目的所有登陆数据任务。
-
-
准备就绪后,单击 保存。
监控视图现已创建,并显示符合筛选条件且处于可运行状态的所有任务。这意味着状态为 新建 或 准备就绪 的任务不会显示在监控视图中。如果已成功准备的任务被更改且准备时出错,监控视图将显示可以运行的上一个版本。
克隆监控视图
您也可以通过克隆现有监控视图来创建监控视图。
-
单击 另存为 并使用新名称保存视图。您还可以选择将视图保存在哪个空间中。
例如,您可以使用此功能来:
-
基于另一个视图创建监控视图。
打开监控视图,更改筛选器,然后使用其他名称进行保存。
-
将监控视图移动到另一个空间
将具有相同名称的监控视图保存到另一个空间,然后删除原始视图。
管理监控视图
要显示监控视图,请导航至 数据集成 > 监控视图。
您可以根据监控视图的 空间 和 所有者 来筛选监控视图。单击监控视图将其打开。
-
要编辑 a 监控视图,请单击 ...,然后单击 编辑。
-
要删除 a 监控视图,请单击 ...,然后单击 删除。
使用监控视图
监控视图显示了使用筛选器所显示的所有数据任务的以下属性。
-
任务名称
-
项目
-
源
显示具有所选数据源的数据移动任务。
-
数据平台/目标
显示具有所选数据平台(数据管道任务)或目标(复制任务)的任务。
-
空间
-
状态
-
消息
-
数据更新至
截至此时,已应用至少一个任务源的源更改。
-
数据集
-
出错的数据集
-
下次计划
-
Lakehouse 集群
信息注释Lakehouse 集群筛选器仅适用于 Qlik Open Lakehouse 项目。 -
上次运行:开始时间
-
上次运行:持续时间
-
上次运行:数据集
-
所有者
-
已处理的数据集
-
已处理的记录
-
已创建
-
已修改
-
操作
此列包含一个菜单,您可以在其中根据任务的状态执行操作,例如 运行 或 停止。您还可以访问计划,并直接转到项目或任务设计。
选择要显示的列
您可以通过单击列上的 并选择 显示的列 来自定义要显示的列。然后,您可以选择要显示或隐藏的列。
您可以通过单击列上的 并选择 隐藏列 来隐藏单列。
对监控视图中的数据任务进行排序
您可以通过单击列标题对数据任务进行排序。再次单击标题可在升序和降序排序顺序之间进行切换。您也可以单击列上的 并选择 升序排序 或 降序排序。
要对多列进行排序,请在选择列时按 Shift 或 Ctrl。在 macOS 设备上,请使用 command 键 (⌘)。
固定列
您可以将列固定到列的左侧或右侧,以便在水平滚动时保持其可见。
-
单击
on a column and select 固定到左侧 or 固定到右侧。
要取消固定已固定的列,请单击列上的 并选择 取消固定。
筛选监控视图中的任务
您还可以单击 KPI 以快速概览任务状态。KPI 项可用作快速筛选器。以下 KPI 可用:
-
准备运行
这包括所有尚未运行的任务,以及在执行完成前停止的任务。
-
正在运行
-
已完成
这包括上次运行成功的所有任务。
-
需要注意!
这将显示所有出错的任务,以及网关代理已断开连接的任务。
过渡状态(例如 正在启动)包含在最接近的 KPI 项中。
查看数据任务的详细信息
您可以查看数据任务的详细信息。
-
选择数据任务。
-
单击 详细信息。
您可以查看:
-
管道,以查看数据任务所属项目的管道视图。
您还可以通过单击 打开任务监控 转到所选数据任务的单个监控视图。
运行数据任务
您可以在监控视图中运行数据任务。
-
在监控视图中选择一个或多个任务。
-
单击 运行 以运行所选任务。
-
单击 停止 以停止所选任务。
-
有关运行数据任务的更多信息,请参阅:
查看运行历史记录
您可以查看任务的运行历史记录,以确定根本原因并了解随时间推移而呈现的模式。
-
在任务的 监控 视图中,单击 运行历史记录。
-
在 监控视图 中,单击任务的 ... 菜单中的 运行历史记录。
根据您的筛选选择,运行历史记录中最多显示 100 次执行。优化您的筛选条件以查看其他执行。您可以根据执行结束日期和任务状态进行筛选。运行信息保留 13 个月。运行中的数据集元数据保留 30 天。