Przedstawiamy Qlik Talend Data Integration
Qlik Talend Data Integration umożliwia dostarczanie danych gotowych do użycia do Qlik Cloud lub hurtowni danych w chmurze, takich jak Snowflake, Google Cloud BigQuery i Azure Synapse Analytics. Źródła danych mogą być lokalne lub w chmurze. Dane można aktualizować bez ręcznej interwencji dzięki funkcji przechwytywania zmian danych (CDC, Change Data Capture) lub technologiom wsadowym, takim jak zaplanowane ładowanie. Można utworzyć potok danych i przeprowadzić dostosowane do potrzeb transformacje oraz tworzyć data marty (tematyczne hurtownie danych).
Dostęp do strony głównej Qlik Talend Data Integration można uzyskać, wybierając Integracja danych z menu uruchamiania ().
Więcej informacji o architekturze usługi Qlik Talend Data Integration zawiera temat Architektura zbiorów danych w hurtowni danych w chmurze.
Opcje subskrypcji
Subskrypcje Qlik Talend Cloud oparte są na modelu pojemności z wolumenem przenoszonych danych jako podstawowym wskaźnikiem wartości.
Platforma Qlik Talend Cloud jest dostępna w formie subskrypcji na czterech poziomach: Starter, Standard, Premium i Enterprise. Wyższe wersje zapewniają bardziej zaawansowane źródła danych i transformacje. Obejmuje to zdolności hostowane w Qlik Cloud i Talend Cloud. Wszystkie subskrypcje obejmują Qlik Cloud Analytics Standard.
Więcej informacji o opcjach subskrypcji zawiera temat Opcje subskrypcji Qlik Talend Cloud.
Przestrzenie danych
Przestrzenie danych to zarządzane obszary dzierżawy Qlik Cloud, które służą do tworzenia i przechowywania projektów. W przestrzeni można też utworzyć nowe połączenia przy użyciu łączników oraz zarządzać dostępem do bram Data Movement gateway. Wszystkie zasoby danych zostaną utworzone w przestrzeni projektu, do którego należą.
Więcej informacji zawiera temat Praca w przestrzeniach w Qlik Talend Data Integration.
Projekty
Projekt to miejsce, w którym tworzysz przepływ integracji danych przy użyciu zadań danych. Projekt jest powiązany z platformą danych, która służy jako miejsce docelowe wszystkich danych wyjściowych. Projekt możesz utworzyć z dowolnym z następujących zastosowań:
-
Potok danych
Utwórz prosty liniowy potok danych lub złożony potok danych — wykorzystujący kilka źródeł danych i generujący wiele danych wyjściowych.
-
Replikacja
Replikuj dane z obsługiwanych źródeł danych do dowolnego obsługiwanego obiektu docelowego albo umieść je w jeziorze danych.
Zadanie dotyczące danych
Zadanie danych to główna jednostka pracy w projekcie. W projekcie można utworzyć następujące typy zadań danych. Nowe zadanie danych tworzy się, klikając pozycję Dodaj nowe na górnym pasku, a następnie klikając odpowiednie zadanie.
Zadania danych w projektach potoków danych
-
Umieszczanie
Kopiuj dane ze źródła danych do obszaru umieszczania. Źródła danych mogą być lokalne lub w chmurze. Obszar umieszczania może być miejscem docelowym w chmurze lub zasobnikiem danych Amazon S3 (tylko w przypadku tworzenia zestawów danych QVD).
Aby zachować aktualność danych bez ręcznej interwencji, można korzystać z funkcji przechwytywania zmian danych — CDC — lub wykonywać pełne ładowania, które są zaplanowane okresowo.
-
Zarejestrowane dane
Zarejestruj dane, które już istnieją na platformie danych. Umożliwia to używanie danych dołączonych przy użyciu innych narzędzi niż Qlik Talend Data Integration, na przykład Qlik Replicate.
Rejestrowanie danych, które już istnieją na platformie danych
-
Pamięć masowa
Utwórz gotowe do użycia zestawy danych w hurtowni danych w chmurze albo w Qlik Cloud z danych skopiowanych przez zadanie umieszczania danych. Zestawy danych są aktualizowane danymi do umieszczania bez ręcznej interwencji.
-
Transformacja
Twórz transformacje danych wielokrotnego użytku na podstawie reguł i niestandardowych instrukcji SQL w ramach potoku danych. Można przeprowadzać transformacje na poziomie wiersza i tworzyć zestawy danych zmaterializowanych, takich jak tabele, lub w postaci widoków, w których przekształcenia odbywają się na bieżąco.
-
Data mart
Twórz data marty, aby wykorzystać zadania danych Pamięć masowa lub Transformacja. W zależności od potrzeb biznesowych można utworzyć dowolną liczbę data martów. Najlepiej, aby tematyczna hurtownia danych zawierała podsumowane dane zbierane na potrzeby analizy w konkretnej sekcji lub jednostce organizacji.
Tworzenie data martów (tematycznych hurtowni danych) i zarządzanie nimi
Zadania danych w projektach replikacji
-
Replikacja
Replikuj dane z obsługiwanych źródeł danych do dowolnego obsługiwanego obiektu docelowego.
-
Umieszczanie w jeziorze
Umieść dane w jeziorze danych.
Umieszczanie danych w jeziorze danych w ramach subskrypcji Standard, Premium lub Enterprise
Monitorowanie zadań danych
Przy użyciu widoków monitorowania można monitorować status i postępy zadań danych. Widok monitorowania umożliwia wyświetlanie statusu wszystkich zadań danych w dzierżawie lub podzestawu zadań danych w oparciu o filtr. Można utworzyć kilka widoków, aby monitorować różne aspekty potoków danych. Więcej informacji zawiera temat Monitorowanie zadań danych i operowanie nimi.
Produkty danych
Zestawy danych zarejestrowane w ramach projektu danych lub przesłane ręcznie i dodane do katalogu można następnie pogrupować i utworzyć z nich pakiety w formie produktu danych. Można na przykład grupować zestawy danych według domeny biznesowej i udostępniać je na platformie handlowej danych, aby konsumenci korzystający z usług analitycznych mogli z nich korzystać w aplikacjach. Więcej informacji zawiera temat Praca z produktami danych.
Połączenia
Połączenia umożliwiają zadaniom danych dostęp do źródeł danych, zewnętrznej pamięci masowej oraz platform docelowych na potrzeby dostarczania danych i transformacji push-down.
Zarządzanie połączeniami
Kliknij Połączenia po lewej stronie, aby wyświetlić wszystkie połączenia danych.
Możesz edytować połączenia, których jesteś właścicielem.
InformacjaMożna również edytować wszystkie połączenia w przestrzeni danych, której jesteś właścicielem lub w której masz rolę Może zarządzać przestrzenią.Kliknij ..., a następnie Edytuj.
Możesz przetestować połączenie.
Kliknij ..., a następnie Testuj połączenie.
Możesz usunąć połączenie.
Kliknij ..., a następnie Usuń.
Tworzenie połączenia
Istnieje kilka sposobów tworzenia połączeń:
Kliknij Połączenia po lewej stronie, a następnie Utwórz połączenie.
Kliknij Utwórz nowe w kreatorach konfiguracji zadania danych, w których wybierasz połączenie.
Kliknij Utwórz połączenie w widoku Połączenia.
Łączniki można filtrować według następujących kryteriów:
Kategoria
Hurtownia danych, Pamięć w chmurze, Baza danych i Aplikacja.
Typ
Źródło lub Miejsce docelowe
Można także wybierać spośród ostatnio używanych łączników.
Należy wybrać rodzaj źródła danych, a następnie wprowadzić adres i informacje uwierzytelniające.
Zob. także: