跳到主要内容 跳到补充内容

数据管道项目设置

您可以在 Qlik Talend Data Integration 中更改数据管道项目的设置。这些属性对于项目和所有包含的数据任务都是通用的。某些设置仅适用于特定的数据平台。

  • 单击项目中的设置

数据平台

您可以更改以下设置:

  • 连接

    项目的连接。

  • 暂存区域连接

    当数据平台为 Snowflake 时,此选项不可用。

信息注释无法对项目的平台类型进行更改,以从 Snowflake 更改为 Google BigQuery

元数据

您可以为内部工件设置后缀,并为创建的视图设置默认后缀。

  • 内部人工痕迹首选项

    设置用于在模式后缀中存储内部工件的模式的后缀。

  • 外部视图后缀

    为在项目中包含的数据任务中创建的视图设置默认后缀。

数据任务默认值

可以为项目中包含的数据任务设置默认值。创建数据任务时,可以更改值。

您可以设置默认数据库来为所有类型的数据任务创建目标工件。

登陆默认值

信息注释此选项仅在通过 Data Movement gateway 访问目标时可用。
  • 使用数据移动网关时的代理服务器

    数据移动 网关连接到云数据仓库和存储区时,您可以选择使用代理服务器。

    有关将 数据移动 网关配置为使用代理服务器的更多信息,请参阅设置 Qlik Cloud 租户和代理服务器

    • 使用代理连接到云数据仓库

      信息注释使用 Snowflake、Google BigQuery 和 Databricks 时可用。
    • 使用代理连接到存储

      信息注释使用 Azure Synapse Analytics、Amazon Redshift 和 Databricks 时可用。

存储默认值

  • 历史数据存储(类型 2)

    您可以保留历史更改数据,以便于在特定时间点重新创建数据。您可以使用历史视图和实时历史视图查看历史数据。

  • 实时视图

    实时视图为每个选择的源表显示一个视图,该视图将表与更改表中的更改合并。这为查询提供了数据的实时视图,而无需等待下一个应用周期。

默认数据库

可以使用项目的默认数据库,也可以指定其他数据库。

目录

  • 发布至目录

    选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。

转换默认值

  • 历史数据存储(类型 2)

    您可以保留历史更改数据,以便于在特定时间点重新创建数据。您可以使用历史视图和实时历史视图查看历史数据。

物化

  • 非物化(仅限视图)

    选择此选项仅可创建即时执行变换的视图。

  • 物化(表和视图)

    选择此选项可同时创建表和视图。

默认数据库

可以使用项目的默认数据库,也可以指定其他数据库。

目录

  • 发布至目录

    选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。

数据集市默认值

默认数据库

可以使用项目的默认数据库,也可以指定其他数据库。

目录

  • 发布至目录

    选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。

注册的数据默认值

默认数据库

可以使用项目的默认数据库,也可以指定其他数据库。

目录

  • 发布至目录

    选择此选项可将此版本的数据作为数据集发布到目录。目录内容将在下次准备此任务时更新。

增量加载设置

当选择使用高水印的增量时,这些设置可用。

  • 更改表格

    如果更改在同一个表中,请选择更改在相同表中

    如果没有,请取消选择更改在同一个表中,并指定更改表模式。

  • 水印列

    名称中设置水印列的名称。

  • “起始日期”列

    您可以通过开始时间或使用选定的列来指示“起始日期”。

    如果选择选定的“起始日期”列,则必须定义一个“开始日期”模式

  • 软删除

    通过选择更改包括软删除并定义指示表达式,可以在更改中包括软删除。

    如果更改是软删除,则指示表达式的计算结果应为 True。

    示例:${is_deleted} = 1

  • 之前图像

    通过选择图像之前并定义指示表达式,可以筛选出更改表更改中的之前图像记录。

    如果行包含更新前的图像,则指示表达式的计算结果应为 True。

    示例:${header__change_oper} = 'B'

运行时

您可以为项目中包含的数据资产定义默认运行时性能设置。

登陆默认值

  • 您可以设置并行执行中的最大数据库连接数。

存储默认值

  • 对于默认计划设置,您可以将其设置为基于时间的计划。这将是每个创建的存储任务的默认值。

  • 如果项目平台是 Snowflake,则可以设置默认数据仓库。

转换默认值

  • 您可以将默认计划设置设置为基于时间的计划,或在成功完成任何输入数据任务时设置。这将是每个创建的转换任务的默认值。

  • 如果项目平台是 Snowflake,则可以设置默认数据仓库。

数据集市默认值

  • 您可以将默认计划设置设置为基于时间的计划,或在成功完成任何输入数据任务时设置。这将是每个创建的数据集市任务的默认值。

  • 如果项目平台是 Snowflake,则可以设置默认数据仓库。

本页面有帮助吗?

如果您发现此页面或其内容有任何问题 – 打字错误、遗漏步骤或技术错误 – 请告诉我们如何改进!