Блок S3

Определения метаданных, конфигурации и промежуточные данные, необходимые для управления озер-хранилищ с таблицами Iceberg, хранятся в специальном блоке Amazon S3.

Блок Amazon S3 — это облачный контейнер, используемый для хранения и организации данных в виде объектов. Блоки представляют собой масштабируемое, надежное и высокодоступное хранилище и поэтому они могут самое широкое применение.

В архитектуре Открытое озеро данных Qlik в блоке S3 хранятся определения объектов метаданных, файлы конфигурации и промежуточные данные, необходимые для управления озера-хранилища на базе Iceberg. Этот блок служит центральным хранилищем, которое используется для ключевых операций, таких как каталогизация данных, отслеживание версий и выполнение заданий.

Для стабильной работы блок S3 должен быть создан и доступен в том же регионе AWS, что и ресурсы Lakehouse.

Необходимые условия

Необходимо создать виртуальную частную сеть (VPC) и настроить подсеть и зоны доступности для размещения Открытое озеро данных Qlik.

Создание блока S3

Чтобы создать блок S3:

1. В консоли AWS перейдите в раздел S3 и нажмите кнопку Buckets.

2. В разделе General purpose buckets (Блоки общего назначения) нажмите Create bucket (Создать блок) и настройте блок:

• Bucket type: тип блока; выберите General purpose.

• Имя блока: Укажите имя для вашего блока, например, qlik-open-lakehouse-bucket.

3. Создайте блок и запишите его название.