Azure Data Lake Storage

Azure Data Lake Storage 可以用作：

• 使用 Databricks、Microsoft Fabric 或 Azure Synapse Analytics 作为数据管道目标时的云暂存区。云暂存区是数据和更改在应用和存储之前暂存的地方。

• 复制任务中的目标。

  • 有关如何使用标准、高级和企业订阅将数据复制到 Azure Data Lake Storage 的说明，请参阅使用标准、高级或企业订阅将在数据湖中登陆数据。
  • 有关如何使用入门订阅将数据复制到 Azure Data Lake Storage 的说明，请参阅通过 Qlik Talend Cloud Starter订阅复制数据。

限制和考虑事项

以下限制适用：

• 不支持完整 LOB 模式。
• 不支持包含斜杠 (/) 或反斜杠 (\) 字符的数据库名称、模式名称或表名称。

存储权限

连接器设置中指定的 Azure Active Directory 租户必须被授予以下 ADLS Gen2 存储权限。

• 在存储容器上：LIST
• 在存储目录上：READ、WRITE 和 DELETE
• 在 ADLS Gen2 文件系统的访问控制 (IAM) 设置中，将“存储 Blob 数据贡献者”角色分配给 （AD 应用程序 ID）。角色可能需要几分钟才能生效。

设置 Azure Data Lake Storage 连接属性

要配置连接器，请执行以下操作：

1. 在连接中单击创建连接。

2. 选择 Azure Data Lake Storage 目标连接器，然后提供以下设置：

数据目标

数据网关：选择将用于测试与 ADLS 的连接的 数据移动网关。这应该与从数据源部署到登陆数据的 数据移动网关 相同。

连接属性

• 存储帐户

  存储帐户的名称。

• 容器名称

  要用作云暂存区域的容器的名称。

• Azure Active Directory 租户 ID

  Azure Active Directory 中订阅的租户 ID。

• Azure 应用程序注册客户端 ID

  Azure Active Directory 中应用程序的客户端 ID。

• Azure 应用程序注册密码

  Azure Active Directory 中应用程序的密码

名称

连接的显示名称。

数据类型映射

下表显示了从 Qlik Cloud 数据类型到 Azure Data Lake Storage 数据类型的默认映射。

从 Qlik Cloud 数据类型到 Azure Data Lake Storage 的映射

从 Qlik Cloud 数据类型到 Parquet 的映射

当把 Parquet 设置为文件格式时，由于 Parquet 支持的数据类型数量有限，数据类型映射如下：