数据管道项目设置
您可以在 Qlik Talend Data Integration 中更改数据管道项目的设置。这些属性对于项目和所有包含的数据任务都是通用的。某些设置仅适用于特定的数据平台。
-
单击项目中的设置。
数据平台
您可以更改以下设置:
-
连接
项目的连接。
-
暂存区域连接
当数据平台为 Snowflake 时,此选项不可用。
元数据
您可以为内部工件设置后缀,并为创建的视图设置默认后缀。
-
内部人工痕迹首选项
设置用于在模式后缀中存储内部工件的模式的后缀。
-
外部视图后缀
为在项目中包含的数据任务中创建的视图设置默认后缀。
数据任务默认值
可以为项目中包含的数据任务设置默认值。创建数据任务时,可以更改值。
您可以设置默认数据库来为所有类型的数据任务创建目标工件。
登陆默认值
-
使用数据移动网关时的代理服务器
当 数据移动 网关连接到云数据仓库和存储区时,您可以选择使用代理服务器。
有关将 数据移动 网关配置为使用代理服务器的更多信息,请参阅设置 Qlik Cloud 租户和代理服务器。
-
使用代理连接到云数据仓库
信息注释使用 Snowflake、Google BigQuery 和 Databricks 时可用。 -
使用代理连接到存储
信息注释使用 Azure Synapse Analytics、Amazon Redshift 和 Databricks 时可用。
-
存储默认值
-
历史数据存储(类型 2)
您可以保留历史更改数据,以便于在特定时间点重新创建数据。您可以使用历史视图和实时历史视图查看历史数据。
-
实时视图
实时视图为每个选择的源表显示一个视图,该视图将表与更改表中的更改合并。这为查询提供了数据的实时视图,而无需等待下一个应用周期。
默认数据库
可以使用项目的默认数据库,也可以指定其他数据库。
目录
-
发布至目录
选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。
转换默认值
-
历史数据存储(类型 2)
您可以保留历史更改数据,以便于在特定时间点重新创建数据。您可以使用历史视图和实时历史视图查看历史数据。
物化
-
非物化(仅限视图)
选择此选项仅可创建即时执行变换的视图。
-
物化(表和视图)
选择此选项可同时创建表和视图。
默认数据库
可以使用项目的默认数据库,也可以指定其他数据库。
目录
-
发布至目录
选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。
数据集市默认值
默认数据库
可以使用项目的默认数据库,也可以指定其他数据库。
目录
-
发布至目录
选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。
注册的数据默认值
默认数据库
可以使用项目的默认数据库,也可以指定其他数据库。
目录
-
发布至目录
选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。
增量加载设置
当选择使用高水印的增量时,这些设置可用。
-
更改表格
如果更改在同一个表中,请选择更改在相同表中。
如果没有,请取消选择更改在同一个表中,并指定更改表模式。
-
水印列
在名称中设置水印列的名称。
-
“起始日期”列
您可以通过开始时间或使用选定的列来指示“起始日期”。
如果选择选定的“起始日期”列,则必须定义一个“开始日期”模式。
-
软删除
通过选择更改包括软删除并定义指示表达式,可以在更改中包括软删除。
如果更改是软删除,则指示表达式的计算结果应为 True。
示例:${is_deleted} = 1
-
之前图像
通过选择图像之前并定义指示表达式,可以筛选出更改表更改中的之前图像记录。
如果行包含更新前的图像,则指示表达式的计算结果应为 True。
示例:${header__change_oper} = 'B'
运行时
您可以为项目中包含的数据资产定义默认运行时性能设置。
登陆默认值
-
您可以设置并行执行中的最大数据库连接数。
存储默认值
-
对于默认计划设置,您可以将其设置为基于时间的计划。这将是每个创建的存储任务的默认值。
-
如果项目平台是 Snowflake,则可以设置默认数据仓库。
转换默认值
-
您可以将默认计划设置设置为基于时间的计划,或在成功完成任何输入数据任务时设置。这将是每个创建的转换任务的默认值。
-
如果项目平台是 Snowflake,则可以设置默认数据仓库。
数据集市默认值
-
您可以将默认计划设置设置为基于时间的计划,或在成功完成任何输入数据任务时设置。这将是每个创建的数据集市任务的默认值。
-
如果项目平台是 Snowflake,则可以设置默认数据仓库。