Подключение данных к Qlik Open Lakehouse

Qlik Open Lakehouse позволяет оптимизировать перемещение данных из любого поддерживаемого источника в таблицы Apache Iceberg. Благодаря открытому формату, таблицы Iceberg поддерживаются разными приложениями, платформами данных и инструментами, что позволяет во многих случаях избавиться от дублирования данных. Вы можете зеркалировать таблицы в своих Qlik Open Lakehouse проектах в свое облачное хранилище данных, и пользователи могут запрашивать данные непосредственно из вашего облачного хранилища данных.

Для подключения данных к Qlik Open Lakehouse и сохранения их в таблицах формата Iceberg необходимо создать сетевую интеграцию с виртуальным частным облаком AWS VPC. Через сетевую интеграцию Qlik будет безопасным образом выделять ресурсы и управлять ими в облачной среде. Далее необходимо создать кластер Lakehouse, который будет предоставлять вычислительную среду для обработки и хранения данных. Заключительный этап — подключение каталога данных к центральному репозиторию метаданных.

Из проектов Qlik Open Lakehouse можно строить конвейеры данных, если все компоненты настроены правильно. Конвейеры данных получают данные и сохраняют их в таблицах данных Iceberg.Вы можете получать доступ к таблицам Iceberg и запрашивать их с помощью широкого спектра инструментов, в том числе непосредственно из вашего облачного хранилища данных.