Azure Data Lake Storage

Azure Data Lake Storage można użyć jako:

• Obszaru tymczasowego w chmurze podczas używania Databricks, Microsoft Fabric lub Azure Synapse Analytics jako miejsca docelowego potoku danych. Obszar tymczasowy w chmurze to miejsce, w którym dane i zmiany są przechowywane przed zastosowaniem i zapisaniem.

• Miejsce docelowe w zadaniu replikacji.

  • Wyjaśnienie sposobu replikowania danych do Azure Data Lake Storage w ramach subskrypcji Standard, Premium i Enterprise zawiera temat Umieszczanie danych w jeziorze danych w ramach subskrypcji Standard, Premium lub Enterprise.
  • Wyjaśnienie sposobu replikowania danych do Azure Data Lake Storage w ramach subskrypcji Starter zawiera temat Replikacja danych w ramach subskrypcji Qlik Talend Cloud Starter.

Ograniczenia i uwagi

Obowiązują następujące ograniczenia:

• Pełny tryb LOB nie jest obsługiwany.
• Nazwy baz danych, nazwy schematów lub nazwy tabel zawierające ukośnik (/) bądź ukośnik odwrotny (\) nie są obsługiwane.

Uprawnienia pamięci masowej

Dzierżawa Azure Active Directory określona w ustawieniach łącznika musi mieć przyznane następujące uprawnienia do przechowywania danych w usłudze ADLS Gen2.

• W kontenerze pamięci masowej: LIST
• W katalogu pamięci masowej: READ, WRITE and DELETE
• U ustawieniach kontroli dostępu (IAM) systemu plików ADLS Gen2 należy przypisać rolę „Storage Blob Data Contributor” (Współautor danych Blob w pamięci masowej) usłudze Replicate (ID aplikacji AD). Zastosowanie tej roli może potrwać kilka minut.

Konfiguracja właściwości połączenia Azure Data Lake Storage

Aby skonfigurować łącznik, wykonaj następujące czynności:

1. W obszarze Połączenia kliknij Utwórz połączenie.

2. Wybierz łącznik miejsca docelowego Azure Data Lake Storage , a następnie podaj następujące ustawienia:

Miejsce docelowe danych

Brama danych: Wybierz bramę Brama danych ruchu danych, która będzie używana do testowania połączenia z ADLS. Powinna to być taka sama Brama danych ruchu danych wdrożona w celu umieszczania danych ze źródła danych.

Właściwości połączenia

• Konto pamięci masowej

  Nazwa konta pamięci masowej.

• Nazwa kontenera

  Nazwa kontenera, który ma być użyty jako miejsce przechowywania w chmurze.

• Identyfikator dzierżawy Azure Active Directory

  Identyfikator dzierżawy subskrypcji w Azure Active Directory.

• Identyfikator klienta rejestracji aplikacji Azure

  Identyfikator dzierżawy subskrypcji w Azure Active Directory.

• Klucz tajny rejestracj aplikacji Azure

  Klucz tajny aplikacji w Azure Active Directory

Nazwa

Nazwa wyświetlana dla połączenia.

Mapowanie typów danych

Następująca tabela pokazuje domyślne mapowanie z typów danych Qlik Cloud do docelowych typów danych Azure Data Lake Storage.

Mapowanie z typów danych Qlik Cloud na Azure Data Lake Storage

Mapowanie z typów danych Qlik Cloud na Parquet

Po ustawieniu formatu plików Parquet mapowania typów danych będą takie, jak pokazano poniżej, ze względu na ograniczoną liczbę typów danych obsługiwanych przez Parquet.