创建复制项目
创建数据复制项目,以在支持的数据源和目标之间高效、安全地移动数据。可以转换数据,并通过 CDC 保持数据持续更新。
有两种类型的复制用例:
- 复制数据
-
将数据登陆到数据湖中
信息注释除 Qlik Talend Cloud Starter 订阅外的所有订阅层级,复制用例分为独立的复制任务类型:用于复制到数据库和数据仓库的“复制数据”任务,以及用于复制到云存储的“将数据登陆到数据湖”任务。使用 Qlik Talend Cloud Starter 订阅时,没有用于云存储的独立“将数据登陆到数据湖”任务。相反,“复制数据”任务支持复制到所有支持的目标(数据库、数据仓库和云存储)。
数据复制过程包含以下操作:
- 从数据源检索数据
- 转换数据(可选)
- 将数据加载到目标
- 通过计划的或实时的更改捕获保持数据最新
设置到数据源和目标的连接
虽然可以在任务设置期间设置连接,但最佳实践要求在设置复制任务之前定义并验证连接。这样,在设置任务时,只需选择之前配置的连接器即可。
信息注释如果在任务准备就绪后更改源连接、目标连接或源数据网关,则必须重新创建所有数据集。
设置复制任务
使用标准、高级或企业订阅复制数据
创建从支持的数据源到任何支持的目标的复制任务,具有实时 CDC 并支持专用连接。
通过Qlik Talend Cloud Starter 订阅复制数据
创建从 SaaS 应用程序和支持的数据库源到任何支持的目标(数据库、数据仓库和云存储)的复制任务,具有计划的 CDC。
使用标准、高级或企业订阅将在数据湖中登陆数据
将数据从任何支持的源复制到支持的云存储目标。