Подключение данных к Открытое озеро данных Qlik

Открытое озеро данных Qlik позволяет оптимизировать перемещение данных из любого поддерживаемого источника в таблицы Apache Iceberg. Благодаря открытому формату, таблицы Iceberg поддерживаются разными приложениями, платформами данных и инструментами, что позволяет во многих случаях избавиться от дублирования данных. В проектах Открытое озеро данных Qlik можно передавать зеркальные данные в Snowflake, чтобы пользователи могли делать запросы непосредственно в Snowflake.

Для подключения данных к Открытое озеро данных Qlik и сохранения их в таблицах формата Iceberg необходимо создать сетевую интеграцию с виртуальным частным облаком AWS VPC. Через сетевую интеграцию Qlik будет безопасным образом выделять ресурсы и управлять ими в облачной среде. Далее необходимо создать кластер Lakehouse, который будет предоставлять вычислительную среду для обработки и хранения данных. Заключительный этап — подключение каталога данных к центральному репозиторию метаданных.

Из проектов Открытое озеро данных Qlik можно строить конвейеры данных, если все компоненты настроены правильно. Конвейеры данных получают данные и сохраняют их в таблицах данных Iceberg.Для доступа и запросов к таблицам Iceberg можно использовать широкий спектр инструментов, в том числе и Snowflake.