Brama danych Qlik — ruch danych

Brama danych Qlik — ruch danych (dalej Brama danych ruchu danych) umożliwia przenoszenie danych ze źródeł danych przedsiębiorstwa i aplikacji SaaS do obsługiwanych miejsc docelowych przez wyłącznie wychodzące, zaszyfrowane i wzajemnie uwierzytelnione połączenie. Eliminując konieczność otwierania przychodzących portów zapory sieciowej, Brama danych ruchu danych zapewnia bezpieczne i zaufane środki przenoszenia danych przedsiębiorstwa.

Kiedy jest wymagana brama Brama danych ruchu danych?

Brama Brama danych ruchu danych jest dostępna tylko dla klientów mających subskrypcję Standard, Premium lub Enterprise.

Brama Brama danych ruchu danych jest wymagana w następujących przypadkach:

Twoje źródło lub miejsce docelowe danych nie są bezpośrednio dostępne z Qlik Cloud. Przykłady źródeł danych lub miejsc docelowych, które nie są bezpośrednio dostępne z Qlik Cloud, obejmują źródła danych lub miejsca docelowe zlokalizowane w VPC lub za zaporą sieciową zamkniętą dla komunikacji przychodzącej.

Więcej informacji na temat połączeń prywatnych zawiera temat Obsługa połączeń prywatnych w Qlik Talend Data Integration poniżej.
Potrzebujesz CDC działającego niemal w czasie rzeczywistym ze źródeł baz danych.
Musisz uzyskiwać dostęp do platform docelowych za pośrednictwem serwera proxy.
Chcesz używać hurtowni wiedzy.
Masz subskrypcję Premium lub Enterprise i potrzebujesz przyrostowego ładowania ze źródeł aplikacji SaaS częściej niż co 30 minut. Korzystając z Brama danych ruchu danych i subskrypcji Premium oraz Enterprise, możesz ustawić interwał nawet na 5 minut.

Informacje na temat minimalnych interwałów planowania według typu źródła danych i poziomu subskrypcji zawiera temat Minimalne dozwolone interwały planowania.
Twoje źródło danych jest jednym z następujących:
- IBM DB2 for z/OS
- IBM DB2 for iSeries
- IBM DB2 for LUW
- SAP Extractor
- SAP (aplikacja)
- SAP ODP
- SAP HANA (baza danych)
- Oracle
- Microsoft SQL Server (z obsługą dzienników Microsoft)
InformacjaMożesz użyć Brama danych ruchu danych dla dowolnego źródła danych. Powyższe źródła danych to te, które wymagają Brama danych ruchu danych. W przypadku wszystkich innych źródeł danych można używać Brama danych ruchu danych, jeśli potrzebna jest dodatkowa oferowana funkcjonalność, ale nie jest to standardowy wymóg.
Potrzebujesz dodatkowej warstwy zabezpieczeń zapewnianej przez Brama danych ruchu danych, która zapobiega przepływowi danych przez Qlik Cloud i pozwala klientom kontrolować ścieżkę danych. Dotyczy to tylko źródeł danych RDBMS, mainframe i SAP.

W poniższym przykładzie brama Brama danych ruchu danych nie jest wymagana, ponieważ zarówno źródło aplikacji SaaS, jak i docelowa hurtownia danych są bezpośrednio dostępne z Qlik Cloud.

Przenoszenie danych z aplikacji SaaS do docelowej hurtowni danych bez Brama danych ruchu danych

Matryca wdrożenia Brama danych ruchu danych

Zastosowanie	Wdrożenie Brama danych ruchu danych
Używanie różnych narzędzi Brama danych ruchu danych dla łączników źródłowych i docelowych	Zadanie przenoszenia danych jest zawsze uruchamiane przy użyciu narzędzia Brama danych ruchu danych zdefiniowanego dla łącznika źródłowego. Oznacza to, że komputer, na którym zainstalowano bramę źródłową, musi mieć dostęp zarówno do źródła danych, jak i platformy docelowej. Narzędzie Brama danych ruchu danych zdefiniowane dla łącznika docelowego umożliwia Qlik Cloud dostęp do miejsca docelowego na potrzeby transformacji i innych operacji ELT.
Przenoszenie danych ze źródła SaaS na platformę docelową z lokalizacją w VPC	Chociaż narzędzie Brama danych ruchu danych nie jest wymagane do uzyskania dostępu do źródeł danych SaaS, jest ono wymagane, jeśli docelowa platforma zadania danych ma lokalizację w VPC lub jest w inny sposób niedostępna z Qlik Cloud. W takim przypadku zadanie przenoszenia danych zostanie uruchomione przy użyciu narzędzia Brama danych ruchu danych zdefiniowanego dla łącznika SaaS.
Definiowanie narzędzia Brama danych ruchu danych dla łącznika docelowego	Zdefiniowanie narzędzia Brama danych ruchu danych dla łącznika docelowego jest konieczne tylko wtedy, gdy platforma docelowa ma lokalizację w VPC lub jest w inny sposób niedostępna z Qlik Cloud. Docelowe narzędzie Brama danych ruchu danych nie wykonuje żadnych operacji przenoszenia danych, ponieważ jest to wyłącznie rola źródłowego narzędzia Brama danych ruchu danych. Zamiast tego umożliwia Qlik Cloud dostęp do miejsca docelowego na potrzeby transformacji i innych operacji ELT.

Ochrona danych

Dla każdego serwera bramy Brama danych ruchu danych połączonego z dzierżawą Qlik Cloud jest tworzona unikatowa para kluczy. Para ta jest używana do uwierzytelniania i szyfrowania od końca do końca na bazie szyfrowania poziomu transportu protokołu HTTPS. Ponadto, ponieważ komunikacja z Qlik Cloud i transfer danych są inicjowane tylko przez porty wychodzące, nie musisz otwierać żadnych portów wchodzących do swojej sieci firmowej.

Qlik Cloud Government umożliwia używanie Brama danych ruchu danych tylko wtedy, gdy platformę Linux, na której zainstalowano Brama danych ruchu danych, skonfigurowano do działania w trybie zgodnym z FIPS 140-2, znanym jako „tryb FIPS”.

Dokumentacja Brama danych ruchu danych zawsze odzwierciedla możliwości najnowszej wersji aplikacji. Jeśli nie używasz najnowszej wersji, administrator systemu powinien natychmiast dokonać aktualizacji do najnowszej wersji. Informacje o uaktualnieniu zawiera temat Uaktualnianie i odinstalowywanie Brama danych ruchu danych

Typowe zastosowania

Poniższa sekcja przedstawia dwa typowe zastosowania: przenoszenie danych do miejsca docelowego, do którego można uzyskać dostęp tylko za pośrednictwem połączenia prywatnego, oraz przenoszenie danych do miejsca docelowego, do którego można uzyskać bezpośredni dostęp z Qlik Cloud.

Brama danych Qlik — ruch danych odgrywa kluczową rolę w procesie przenoszenia danych. Poniższe diagramy ilustrują sposób interakcji Brama danych ruchu danych z Qlik Cloud i Twoimi źródłami danych w celu bezpiecznego przeniesienia danych do obsługiwanych miejsc docelowych.

Liczba bram Brama danych ruchu danych, jaką trzeba wdrożyć, zależy od środowiska i konkretnego przypadku. Jeśli Twoje źródła danych znajdują się blisko siebie, a miejsce docelowe jest bezpośrednio dostępne z Qlik Cloud, zazwyczaj wystarczy pojedyncza brama Brama danych ruchu danych. W następujących przypadkach najlepszą praktyką jest jednak użycie wielu bramy danych:

Pozyskiwanie danych z oddalonych od siebie geograficznie źródeł danych
Przenoszenie dużych ilości danych z wielu źródeł danych
Przenoszenie danych do miejsca docelowego, do którego nie można uzyskać dostępu z Qlik Cloud (takiego jak SQL Server w wirtualnej chmurze prywatnej)

Obsługa połączeń prywatnych w Qlik Talend Data Integration

Połączenie prywatne oznacza, że Twoje źródło danych lub miejsce docelowe nie są dostępne za pośrednictwem Internetu, przez co nie są dostępne z Qlik Cloud.

Istnieje kilka typów połączeń prywatnych, a ich przykłady to:

Snowflake AWS PrivateLink, w którym łączność publiczna (przez port 443) została wyłączona
Microsoft SQL Server (lub inny system do zarządzania relacyjnymi bazami danych) działający w wirtualnej chmurze prywatnej mającej tylko prywatny adres IP

Wdrożenie Brama danych ruchu danych w celu uzyskania dostępu do platformy docelowej jest wymagane tylko wtedy, gdy cel nie jest bezpośrednio dostępny z Qlik Cloud.

Brama danych ruchu danych wdrożona w celu uzyskiwania dostępu do miejsca docelowego wykonuje operacje ELT, które obejmują niektóre lub wszystkie z następujących czynności: rejestracja danych, przechowywanie, transformacje i data marty.

Chociaż można używać tej samej bramy w celu uzyskania dostępu zarówno do źródła danych, jak i do ich miejsca docelowego, używanie dwóch bram — jednej uzyskującej dostęp do źródła, a drugiej uzyskującej dostęp do miejsca docelowego — często zapewnia lepszą wydajność. Jeżeli na przykład źródłową bazą danych jest lokalna baza danych Oracle, a docelową bazą danych jest Snowflake AWS PrivateLink, jedna brama (zdefiniowana w połączeniu źródłowym Oracle) będzie używana do umieszczania danych z Oracle w Snowflake, podczas gdy druga brama (zdefiniowana w połączeniu docelowym Snowflake) będzie używana do wykonania operacji ELT. Korzystanie z dwóch bram jest szczególnie zalecane, jeśli źródłowa i docelowa baza danych nie znajdują się blisko siebie. W takiej sytuacji brama do umieszczania danych powinna znajdować się jak najbliżej źródła, a brama do miejsca docelowego powinna znajdować się jak najbliżej tego miejsca docelowego. Jeśli dane są pozyskiwane z wielu źródeł danych, warto także skonfigurować dedykowaną bramę dla każdego źródła danych, w zależności od jego typu i lokalizacji. Przykład tego typu konfiguracji pokazano poniżej.

Kliknij, aby wyświetlić pełny rozmiar — Przenoszenie danych z rozproszonych źródeł danych do miejsca docelowego w wirtualnej chmurze prywatnej, a następnie wykonywanie operacji ELT na miejscu docelowym

Przenoszenie danych ze źródeł danych przedsiębiorstwa do obsługiwanych miejsc docelowych

Na wysokim poziomie proces komunikacji wygląda następująco:

Brama danych ruchu danych ustanawia wzajemnie uwierzytelniane i szyfrowane połączenie z Qlik Cloud przez HTTPS.
Qlik Cloud wysyła instrukcje na temat wykonywania zadania do Brama danych ruchu danych, która zgłasza stan zadania do Qlik Cloud.
Brama danych ruchu danych pobiera dane ze źródła danych i wysyła je w trybie push do wyznaczonego miejsca docelowego.

Przenoszenie danych z aplikacji SaaS do obsługiwanych miejsc docelowych

Na wysokim poziomie proces komunikacji wygląda następująco:

Brama danych ruchu danych ustanawia wzajemnie uwierzytelniane i szyfrowane połączenie z Qlik Cloud przez HTTPS.
Qlik Cloud wysyła instrukcje na temat wykonania zadania umieszczania do bramy Brama danych ruchu danych, która zgłasza status zadania z powrotem do Qlik Cloud.
Kiedy zadanie umieszczania zostaje rozpoczęte, Qlik Cloud pobiera dane z aplikacji SaaS i je przechowuje (zaszyfrowane przy użyciu klucza dzierżawy).
Brama danych ruchu danych pobiera dane aplikacji SaaS z Qlik Cloud i wysyła je w trybie push do wyznaczonego miejsca docelowego.

W tym przypadku nie trzeba instalować Brama danych ruchu danych za zaporą, ponieważ ani źródło (aplikacja SaaS), ani cel nie znajdują się za zaporą.

Przenoszenie danych z aplikacji SaaS i źródeł danych przedsiębiorstwa do obsługiwanych miejsc docelowych

W tym przypadku instalowane są dwie bramy Brama danych ruchu danych (na oddzielnych komputerach): jedna obsługująca źródło danych przedsiębiorstwa, a druga obsługująca aplikację SaaS. Brama Brama danych ruchu danych obsługująca aplikację SaaS nie musi być instalowana za zaporą, ponieważ ani źródło (aplikacja SaaS), ani cel nie znajdują się za zaporą.

Sekwencja komunikacji wysokiego poziomu jest kombinacją zastosowań „Przenoszenie danych ze źródeł danych przedsiębiorstwa” i „Przenoszenie danych z aplikacji SaaS” opisanych powyżej.

Przenoszenie danych z aplikacji SaaS i źródeł danych przedsiębiorstwa w wirtualnej chmurze prywatnej do miejsc docelowych w wirtualnej chmurze prywatnej

Sekwencja komunikacji wysokiego poziomu do przenoszenia danych z aplikacji SaaS wygląda następująco:

Brama danych ruchu danych ustanawia wzajemnie uwierzytelniane i szyfrowane połączenie z Qlik Cloud przez HTTPS.
Qlik Cloud wysyła instrukcje na temat wykonania zadania umieszczania do bramy Brama danych ruchu danych, która zgłasza status zadania z powrotem do Qlik Cloud.
Kiedy zadanie umieszczania zostaje rozpoczęte, Qlik Cloud pobiera dane z aplikacji SaaS i je przechowuje (zaszyfrowane przy użyciu klucza dzierżawy).
Brama danych ruchu danych pobiera dane aplikacji SaaS z Qlik Cloud i wysyła je w trybie push do wyznaczonego miejsca docelowego.

Sekwencja komunikacji wysokiego poziomu do przenoszenia danych ze źródła danych przedsiębiorstwa jest następująca:

Brama danych ruchu danych ustanawia wzajemnie uwierzytelniane i szyfrowane połączenie z Qlik Cloud przez HTTPS.
Qlik Cloud wysyła instrukcje na temat wykonania zadania umieszczania do bramy Brama danych ruchu danych, która zgłasza status zadania z powrotem do Qlik Cloud.
Brama danych ruchu danych pobiera dane ze źródła danych i wysyła je w trybie push do wyznaczonego miejsca docelowego.

Dowiedz się więcej

Czy ta strona była pomocna?

Jeżeli natkniesz się na problemy z tą stroną lub jej zawartością — literówkę, brakujący krok lub błąd techniczny — daj nam znać!

Przekaż tu opinię