Uaktualnianie i odinstalowywanie bramy Brama danych ruchu danych

Obsługa instalacji bramy Brama danych ruchu danych w systemie Red Hat 9.x

Klienci mogą teraz zainstalować bramę Brama danych ruchu danych w systemie Red Hat 9.x lub dowolnej odpowiedniej i kompatybilnej dystrybucji systemu Linux.

Konfigurowanie bramy Brama danych ruchu danych

Zmiany poleceń usług bramy Brama danych ruchu danych

Zmieniły się polecenia zatrzymania, uruchomienia i sprawdzenia stanu usługi Brama danych ruchu danych.

Polecenia usługi Brama danych ruchu danych

Zmiany mapowania typów danych Amazon Redshift

• Typ danych BOOLEAN, który był mapowany do VARCHAR(1) w Amazon Redshift, będzie teraz mapowany do BOOLEAN.
• Typy danych BYTES i BLOB, które były mapowane do VARCHAR(1) w Amazon Redshift, będą teraz mapowane do VARBINARY (długość).

Nowo obsługiwane bazy danych, wersje baz danych i wersje sterowników

W tej sekcji przedstawiono nowo obsługiwane bazy danych, wersje baz danych i wersje sterowników.

• Nowo obsługiwane wersje i wydania źródeł danych

  Następujące wersje źródeł danych są już obsługiwane:

  • Azure Database for MySQL - Flexible Server (obsługa za pośrednictwem łącznika źródła MySQL)
  • MariaDB 10.4 - 10.11 (poprzednio 10.4 i 10.5)

• Nowo obsługiwane docelowe platformy danych i ich wydania

  Następujące wersje docelowych platform danych są już obsługiwane:

  • Azure Database for MySQL - Flexible Server (obsługa za pośrednictwem łącznika miejsca docelowego MySQL)
  • Databricks: Databricks 13.3 LTS i Serverless SQL Warehouse

• Nowo obsługiwana wersja sterownika SAP HANA

  Klienci używający źródła SAP HANA, którzy chcą zainstalować bramę Brama danych ruchu danych w systemie Red Hat Linux 9.x, muszą zainstalować 64-bitowy sterownik SAP HANA ODBC w wersji 2.0.19 lub nowszej.

Wersje baz danych, których obsługa dobiegła końca

W tej sekcji znajdują się informacje na temat wersji baz danych, których obsługa dobiegła końca.

• Zakończono obsługę następujących wersji źródeł danych:

  • Oracle 11.x
  • SAP HANA 1.0

Rozwiązane problemy

• Instalacja bramy Brama danych ruchu danych bez podania hasła serwera uniemożliwi skonfigurowanie adresów URL dzierżawy i serwera proxy za pomocą jednego polecenia.
• Przenoszenie danych ze źródła danych Salesforce (aplikacja SaaS) powodowało dużą liczbę zbędnych ostrzeżeń, co miało wpływ na wydajność ładowania danych.
• Jeśli podczas pobierania zmian dla źródła danych aplikacji SaaS wystąpił błąd w trakcie pobierania zmian w jednej z tabel, tabela ta była zawieszana i usuwana z potoku. Teraz w przypadku napotkania błędu zadanie spróbuje pobrać zmiany maksymalnie trzy razy przed zawieszeniem tabeli.

Nowe miejsca docelowe typu jezioro danych dla projektów replikacji

Zwiększamy liczbę obsługiwanych miejsc docelowych projektów replikacji w Qlik Cloud Data Integration. Oprócz Amazon S3 można teraz wybrać także Azure Data Lake Storage (ADLS) i Google Cloud Storage (GCS) do dostarczania danych do jezior danych w formatach plików Parquet, JSON lub CSV.

Rozwiązane problemy:

• Łącznik źródła IBM DB2 for LUW

  Połączenie z IBM DB2 for LUW kończyło się niepowodzeniem, kiedy rozmiar plików potrzebnych do tego połączenia (np. plik certyfikatu klienta i magazynu kluczy SSL) przekraczał 4 KB.

• Sterownik dla łączy źródła IBM DB2 for LUW i IBM DB2 for z/OS

  Instalacja sterownika DB2 kończyła się niepowodzeniem w przypadku użycia narzędzia do instalacji sterowników.

Obsługa Microsoft Fabric jako miejsca docelowego potoku danych

Microsoft Fabric dołącza do wciąż powiększającej się listy hurtowni danych, których można używać jako miejsc docelowych w projektach potoków danych.

Rozwiązane problemy:

Zaktualizowano wersję sterownika Snowflake w narzędziu do instalacji sterowników.

Rozszerzona obsługa połączeń prywatnych

Z połączenia prywatnego można korzystać, aby zapewnić bezpieczeństwo i zgodność transmisji danych. Upraszcza zarówno zarządzanie siecią, jak i bezpieczeństwo witrtualnej chmury prywatnej (VPC) bez konieczności otwierania portów transmisji przychodzącej zapory, stosowania urządzeń proxy lub tabel routingu. Integracja danych Qlik Cloud obsługuje już prywatne połączenia z docelowymi potokami danych Snowflake, Microsoft SQL Server i Amazon S3. W tej wersji klienci mogą dodatkowo korzystać z połączeń prywatnych podczas przenoszenia danych do Databricks, Microsoft Azure Synapse, Google BigQuery i Amazon Redshift.

Źródła danych oparte na PostgreSQL

• Wszystkie źródła danych oparte na PostgreSQL — obsługa wielozakresowych typów danych: następujące wielozakresowe typy danych są teraz obsługiwane we wszystkich źródłach danych opartych na PostgreSQL (lokalnych i w chmurze).

  • INT4MULTIRANGE
  • INT8MULTIRANGE
  • NUMMULTIRANGE
  • TSMULTIRANGE

• Źródło danych AWS Aurora Cloud dla PostgreSQL — obsługa roli innej niż superużytkownik: użytkownik określony w łączniku PostgreSQL nie musi już mieć roli superużytkownika, aby przenosić dane ze źródła danych AWS Aurora Cloud dla PostgreSQL. Jest to szczególnie przydatne w organizacjach, których korporacyjne zasady zabezpieczeń uniemożliwiają przyznanie dostępu superużytkownika użytkownikom nieuprzywilejowanym.

Źródło danych Microsoft Azure SQL (MS-CDC): Obsługa replikacji geograficznej

Klienci przenoszący dane ze źródła danych Microsoft Azure SQL (MS-CDC) mogą teraz korzystać z bazy danych Geo Replica.

Źródło danych Oracle: Obsługa modułu zabezpieczeń sprzętowych (HSM, Hardware Security Module)

Integracja danych Qlik Cloud obsługuje teraz odczytywanie danych z zaszyfrowanych obszarów tabel Oracle i zaszyfrowanych kolumn podczas CDC.

Obsługa nowych regionów

Integracja danych Qlik Cloud obsługuje teraz dzierżawy w regionach DE i UK.

Nowe obsługiwane wersje i oprogramowanie innych firm

W tej sekcji wymieniono nowe obsługiwane wersje baz danych i sterowników.

• Nowe obsługiwane wersje źródeł danych. Następujące wersje źródeł danych są już obsługiwane:

  • Microsoft SQL Server 2022
  • Oracle 21c
  • PostgreSQL 15
  • DB2 13.1 (podczas pracy z IBM DB2 do z/OS)
  • IBM DB2 for iSeries 7.5

• Nowe obsługiwane wersje docelowych platform danych. Następujące wersje docelowych platform danych są już obsługiwane:

  • Databricks (pamięć w chmurze): Databricks 12.2 LTS i Databricks SQL Serverless

• Wersje sterowników. Następujące wersje sterowników ODBC są już obsługiwane:

  • IBM Data Server Client 11.5.8 do IBM DB2 for z/OZ i IBM DB2 do LUW
  • Sterowanik ODBC Simba 3.0.0.1001 do Google Cloud BigQuery
  • 64-bitowy sterownik Unicode MySQL ODBC 8.0.32

Sterownik Microsoft SQL Server — wymagana aktualizacja

Klienci przenoszący dane do lub z Microsoft SQL Server muszą uaktualnić wersję sterownika ODBC SQL Server do wersji 18.x lub nowszej. Należy pamiętać, że dalsze używanie sterownika ODBC SQL Server w wersji 17.x może powodować błędy danych. Sterownik można zaktualizować przy użyciu narzędzia do instalacji sterowników lub ręcznie. Instrukcję można znaleźć w sekcji Konfiguracja sterownika.

Wersje baz danych, których obsługa dobiegła końca

W tej sekcji znajdują się informacje na temat wersji baz danych, których obsługa dobiegła końca.

• Wersje źródeł danych, których obsługa dobiegła końca. Zakończono obsługę następujących wersji źródeł danych:

  • PostgreSQL 10
  • MySQL 5.6
  • MariaDB 10.3

• Wersje docelowych platform danych, których obsługa dobiegła końca. Zakończono obsługę następujących wersji celów danych:

  • Databricks 9.1 LTS

2022.11.74

15 sierpnia 2023 r.

Obsługa replikacji

Stosujemy podejście zorientowane na chmurę, które umożliwia szybkie wprowadzanie innowacji i wdrażanie. Nie oznacza to jednak, że ograniczamy się wyłącznie do chmury. W ramach ciągłego zwiększania długoterminowej wartości dla naszych klientów z przyjemnością ogłaszamy wydanie nowego zastosowania replikacji podczas tworzenia projektów danych. Nowe zastosowanie replikacji stanowi uzupełnienie istniejącej możliwości tworzenia potoków danych dla wszystkich potrzeb związanych z integracją danych, takich jak modernizacja hurtowni danych.

Projekt replikacji obsługuje replikację danych w czasie rzeczywistym z obsługiwanych źródeł danych do obsługiwanego miejsca docelowego.

Począwszy od najnowszego wydania pierwszym miejscem docelowym obsługującym replikację danych w czasie rzeczywistym jest Microsoft SQL Server. Oprócz obsługi lokalnego serwera Microsoft SQL Server obsługiwani są także następujący dostawcy usług w chmurze:

• Lokalnie
• Amazon RDS
• Google Cloud
• Microsoft Azure (Microsoft Azure Managed Instance i Microsoft Azure Database)

Miejsce docelowe Microsoft Azure Synapse Analytics — wymagana aktualizacja sterownika

Klienci przenoszący dane do Microsoft Azure Synapse Analytics muszą uaktualnić wersję sterownika ODBC SQL Server do wersji 18.x lub nowszej. Należy pamiętać, że dalsze używanie sterownika ODBC SQL Server w wersji 17.x może powodować błędy danych. Sterownik można zaktualizować przy użyciu narzędzia do instalacji sterowników lub ręcznie. Instrukcję można znaleźć w sekcji Konfiguracja sterownika.

Nowa opcja „Ładuj dane ze źródła” dla źródeł aplikacji SaaS

Wprowadzono nową opcję Ładuj ze źródła, która umożliwia klientom odczyt danych bezpośrednio ze źródła podczas pełnego ładowania zamiast używania danych z pamięci podręcznej.

Więcej informacji o tej opcji i jej zastosowaniach można znaleźć w temacie Ustawienia umieszczania.

Zaktualizowano certyfikaty CA

Brama danych ruchu danych 2022.11.74 zawiera zaktualizowane certyfikaty CA, które są potrzebne do uwierzytelniania dzierżawy Qlik Cloud. Zaktualizowane certyfikaty CA zapewniają też obsługę regionów Irlandia i Frankfurt. W związku z tym klienci mający dzierżawy w Irlandii lub Frankfurcie, którzy chcą korzystać z Integracji danych Qlik Cloud, muszą dokonać aktualizacji do tej wersji.

Rozwiązany problem

Zadania umieszczania danych ze źródła Oracle czasami kończyły się niepowodzeniem, jeżeli szeroka tabela zawierała nieużywane lub nieobsługiwane kolumny albo kolumny LOB, które nie były replikowane.

2022.11.70

28 czerwca 2023 r.

Ulepszone narzędzie do instalacji sterowników dla klientów SAP

W poprzednich wersjach klienci musieli uruchamiać polecenie „source arep_login.sh” podczas instalowania klientów SAP. Od tej wersji uruchamianie tego polecenia nie jest już konieczne.

Zaktualizowano certyfikaty CA

Ta wersja zawiera zaktualizowane certyfikaty CA, które są potrzebne do uwierzytelniania dzierżawy Qlik Cloud.

Rozwiązane problemy

• Kiedy zadanie replikacji w Brama danych ruchu danych kończyło się niepowodzeniem i było automatycznie przywracane, zasób danych do umieszczenia w Qlik Cloud nie był informowany o stanie przywrócenia.

• Kompleksowe szyfrowanie Brama danych ruchu danych nie było włączane domyślnie i było kontrolowane przy użyciu flag środowiska uruchomienia.

2022.11.63

2 maja 2023 r.

Narzędzie do instalacji sterowników

W tej wersji wprowadzono narzędzie do instalacji sterowników, które eliminuje konieczność ręcznej instalacji i konfiguracji sterowników. Nowe narzędzie przyspiesza instalację, a jednocześnie znacznie zmniejsza prawdopodobieństwo błędu użytkownika. Po uruchomieniu narzędzia wymagany sterownik jest w miarę możliwości pobierany automatycznie i instalowany. Jeżeli nie można pobrać sterownika (na przykład sterowniki do DB2 wymagają logowania), trzeba tylko pobrać sterownik, skopiować go do specjalnego folderu na urządzeniu z bramą ruchu danych i uruchomić narzędzie.

Przykład używania narzędzia do instalacji sterowników w celu zainstalowania sterownika PostgreSQL zawiera temat Wymagania wstępne

Platforma danych w chmurze Snowflake

Łącznik Snowflake obsługuje obecnie 4-bajtowe znaki emoji.

Obsługa Azure Database for PostgreSQL – Flexible Server jako źródła danych

Łącznik PostgreSQL może teraz przenosić dane z Azure Database for PostgreSQL - Flexible Server.

Obsługa Cloud SQL for PostgreSQL jako źródła danych

Łącznik PostgreSQL może teraz przenosić dane z Cloud SQL for PostgreSQL.

Nowe obsługiwane wersje źródeł danych

W tej wersji wprowadzono obsługę następujących nowych wersji źródeł danych:

• PostgreSQL
• DB2 (for IBM DB2 for z/OS) 12.1
• IBM DB2 for z/OS 2.5

Nowe obsługiwane wersje platform danych w chmurze

Databricks 11.3 LTS

Zakończona obsługa następujących wersji źródeł danych

Następujące wersje źródeł danych nie są już obsługiwane:

• DB2 (for IBM DB2 for z/OS) 11
• PostgreSQL 9.6
• Microsoft SQL Server 2012
• MariaDB 10.2

Rozwiązane problemy

W tej wersji rozwiązano następujące problemy:

• Źródło danych Oracle: Podczas zatrzymywania i wznawiania zadania czasami występował błąd „Failed to set stream position on context”.
• Źródło aplikacji SAP: Zmiany nie były uwzględniane podczas zadania umieszczania.