从管道项目创建数据集

上次更新日期：2026-11-03

截至目前，支持的质量计算类型为 CSV、TXT、Parquet、QVD、XLS 和 XLSX，在以下限制范围内：

• CSV/TXT 最大 1 GB
• Parquet 最大 1 GB
• QVD 高达 100 GB
• XLS/XLSX 最大 100 MB

对于 Parquet 文件，数据质量仅支持扁平模式。不支持嵌套字段 (LIST, MAP, STRUCT)。

超出这些限制的基于文件的数据集不支持数据质量。如果您的 Excel 文件包含多张工作表，则仅在第一张工作表上进行质量计算。

1. 在 Qlik Talend Data Integration > 连接中单击创建连接。

2. 使用具有足够权限和对要导入的表的访问权限的用户的凭据配置对数据库的访问权限。

3. 在Qlik Cloud 分析 中单击创建，然后单击数据连接。

4. 配置对于和以前相同的数据库的访问权限，最好使用同一用户的凭据，或者至少对表具有读取权限的凭据。

5. （仅适用于 Snowflake）在角色字段中，您必须输入一个与 Snowflake 数据库中创建的现有角色相对应的角色，并且该角色对这些对象具有以下权限。

   • 使用库

   • 使用数据库

   • 使用模式

   • 在模式上创建表格

   • 在模式上创建功能

   • 在模式上创建视图

   • 在表格上选择

6. （仅限 Databricks）在 Databricks 中，您必须在数据库上定义以下权限：

   • 创建表格

   • 创建卷

   • MODIFY

   • 读取卷

   • SELECT

   • 使用模式

   • 写入量

7. 返回 Qlik Talend Data Integration 主页，点击新建，然后点击流水线项目。

8. 使用步骤 2 中的连接作为项目的源，并开始构建管道。有关详细信息，请参阅 创建和管理数据管道项目。

9. 在流程中的任何一点，选择一个数据任务，转到设置，然后转到目录选项卡，您可以在其中选中发布到目录复选框。

   这意味着，当管道项目准备和运行时，此版本的数据集将发布到目录中。也可以在项目级别选中此选项。

10. 运行您的数据项目。

运行管道项目后，新数据集将添加到目录中，您将能够访问质量指标及其内容的更多详细信息。此配置还可以将数据集用作分析应用程序的源。

在构建数据产品之前，您可以根据需要添加尽可能多的数据集。由于可以从 Qlik Talend Data Integration 应用中心和 Qlik Cloud 分析 服务应用中心访问目录，您可以在首选位置打开数据集，并将根据上下文使用正确的连接。