创建知识集市

知识集市可让您将结构化数据嵌入并存储在矢量数据库中。这样就可以利用语义搜索特性检索增强的上下文，将其作为检索增强生成 (RAG) 应用程序的上下文。

输出格式为 JSON。

安装 Qlik Data Gateway - Data Movement

创建知识集市前，必须安装特定的 Qlik Data Gateway - Data Movement。有关更多信息，请参阅设置知识集市的 Qlik Data Gateway - Data Movement。

支持的连接

有关支持方面的信息：

• 矢量数据库，请参阅连接至矢量数据库。
• LLM 连接，请参阅连接至 LLM。
• 文件存储，请参阅连接至文件存储。

创建数据

1. 单击点击左侧菜单里的项目，打开一个项目。
2. 从项目页面，您可以生成文档并将其发布到矢量数据库。或者：
   • 单击新建 > 知识集市。
   • 单击数据任务的 > 知识集市。

   配置窗口打开。

3. 输入名称。
4. 输入描述。这是可选的。
5. 从下拉列表存储矢量中选择文件的存储位置。要将文件同项目一起存储，请选择数据项目平台。
6. 如果已选择外部矢量数据库，请创建或选择矢量数据库连接。文件和矢量都将存储在这个矢量数据库中。
7. 创建或选择 LLM 连接。使用语义搜索需要此连接。
8. 单击创建。
9. 在创建数据后，添加文件。

添加文档

1. 在数据任务页面的数据集选项卡中，在左侧面板中单击添加。
2. 选择用来生成文档的基础数据集。将为每条记录创建一个文档。例如，对于患者列表，将为每个患者创建一个文档。
3. 文档模式名称字段已预先填入所选基础数据集的名称。如有需要，可重新命名。
4. 输入描述。这是可选的。
5. 选择您想纳入的数据，以丰富文档内容。
6. 单击确定。返回文档模式选项卡。
7. 选择数据集选项卡。
8. 在左侧面板中，选择之前要作为基础数据集的数据集。
9. 要删除不需要包含在文档中的数据，请选择复选框并单击删除。
10. 为了改进 LLM 执行的语义搜索，请重命名那些名称不够清晰除的数据。

    例如将 dt 重命名为 date。

11. 根据需要删除和重命名数据后，单击右侧的 > 准备数据。文档以 JSON 格式生成。
12. 生成文档时：
    1. 选择数据集选项卡。
    2. 要在运行任务前验证文档，请单击查看数据以显示数据样本。
    3. 单击运行。文件将根据配置被传输到矢量数据库或数据平台。

运行按钮激活后，传输即告完成。

为确保所有数据都已得到传输，您可以询问有关数据的问题。有关更多信息，请参阅使用测试助手。

满负载和更改数据捕获 (CDC)

支持满负载和 CDC。

满负载：为每个文档实例生成一个文档，并将其发送到目标。

CDC：基本或相关实体发生任何变化后，文件都会重新生成。

在基础实体中添加一个条目时，会创建一个新文档。若相关实体中没有条目可以连接到基础实体，它们将不会出现在文档中。

更新输入数据

在更新输入数据时，必须运行数据任务将更改传输到矢量数据库或数据平台。

索引名称

每个知识集市都有一个索引名称，用于语义搜索。

配置任务写入同一个索引时，必须为任务配置相同的 LLM 参数。

如果您希望自己的文件在同一个索引中，它们必须有相同的索引名称。

要编辑索引名称：

1. 在数据任务页面，单击设置。
2. 选择矢量数据库设置选项卡。
3. 编辑索引名称。
4. 单击确定。

设置

您可以查看和编辑知识集市设置。

在数据任务页面中，单击 > 设置。