Przeskocz do zawartości głównej

Dane do umieszczania

Pierwszym krokiem w przesyłaniu danych jest ich umieszczenie. Obejmuje to ciągłe przesyłanie danych z lokalnego źródła danych do obszaru umieszczania za pomocą zadania Qlik Replicate. Zadaniem replikacji steruje zasób danych do umieszczania w Qlik Cloud Data Services.

Przed utworzeniem zasobu danych do umieszczenia musisz utworzyć zadanie Qlik Replicate zgodnie z opisem w Tworzenie zadania replikacji. Musisz także mieć rolę Może używać w przestrzeni, w której znajduje się zasób Enterprise Manager.

Możesz używać dwóch rodzajów obszarów umieszczania danych.

  • Amazon S3

    Gdy umieszczasz dane w zasobniku Amazon S3, możesz ich użyć do wygenerowania tabel QVD gotowych do analizy.

  • Snowflake

    Jeśli dane są umieszczane w Snowflake, można przechowywać tabele Snowflake.

Tworzenie i konfiguracja zasobu danych do umieszczenia

  1. Kliknij Dodaj nowy na stronie głównej Data Services i wybierz Utwórz zasób danych.
  2. W oknie dialogowym Utwórz zasób danych wpisz:

    • Nazwa: Nazwa zasobu danych do umieszczania.

    • Przestrzeń Przestrzeń danych do utworzenia zasobu danych do umieszczania.

    • Typ zasobu: Wybierz Umieszczanie.

    Możesz dodać znaczniki, aby łatwiej znajdować zasoby danych na stronie głównej Data Services.

    Wybierz Otwórz, aby otworzyć zasób danych do umieszczania po jego utworzeniu.

    Kliknij polecenie Utwórz.

  3. Kliknij Wybierz zadanie Replicate.

  4. Wybierz Zasób programu Enterprise Manager, którego chcesz użyć.

    Porada: To jest zasób utworzony zgodnie z opisem w Połącz Qlik Cloud i Qlik Enterprise Manager.
  5. Wybierz Serwer Replicate zawierający zadanie, którego chcesz użyć. Możesz wybrać określony serwer lub Wszystkie.

    Lista dostępnych zadań replikacji jest wypełniana po wybraniu serwera.

    Uwaga: Aby zadanie replikacji było dostępne, musi zostać utworzone zgodnie z opisem w Tworzenie zadania replikacji.
  6. Wybierz zadanie replikacji.

  7. Kliknij Wybierz.

  8. Kliknij przycisk Zapisz.

Zasób danych do umieszczania w chmurze został utworzony i powinien mieć status Gotowy do uruchomienia, co wskazuje, że nie został jeszcze skatalogowany.

Możesz teraz:

  • Uruchomić zasób danych do umieszczania w chmurze, który uruchamia replikację. Zasób zostanie również skatalogowany.

  • Skatalogować zasób danych do umieszczania w chmurze. W ten sposób zasób danych do umieszczania w chmurze stanie się dostępny jako źródło zasobu danych w pamięci bez rozpoczynania przesyłania danych.

    Kliknij Kataloguj, aby skatalogować zasób danych.

    Ostrzeżenie: Po skatalogowaniu zasobu danych nie można wprowadzać zmian w danych źródłowych, które wpływają na wybór tabeli ani strukturę zasobu danych. Nie można również zmienić folderu docelowego. Każda taka zmiana wymaga ponownego utworzenia zasobu danych i wszystkich zasobów, które go wykorzystują i są już skatalogowane.

Gdy zasób zostanie zapisany i skatalogowany, wyświetlany jest stan Gotowy do uruchomienia, co wskazuje, że zasób został skatalogowany. Teraz możesz wykonywać następujące czynności:

  • Wyświetl podgląd struktury i metadanych tabel zasobów danych.

    Kliknij opcję Tabele.

  • Uruchom zasób danych, aby rozpocząć zadanie replikacji, które w sposób ciągły przesyła dane z lokalnego źródła danych do obszaru umieszczania.

    Kliknij Uruchom.

  • Utwórz zasób danych w pamięci na podstawie tego zasobu danych do umieszczania. Zasób danych w pamięci masowej konwertuje dane w obszarze umieszczania na tabele gotowe do analizy. Replikacja i konwersja rozpoczną się dopiero po uruchomieniu zasobów danych.

    Więcej informacji zawiera temat Tworzenie zasobu danych w celu generowania tabel QVD.

Uruchamianie zasobu danych do umieszczania

Teraz możesz uruchomić zasób danych do umieszczania Spowoduje to uruchomienie zadania replikacji, które przesyła dane z lokalnego źródła danych do obszaru umieszczania.

  1. Kliknij Uruchom.

Replikacja powinna się teraz rozpocząć, a powiązane zadanie Qlik Replicate powinno być uruchomione. Najpierw kopiowane jest pełne źródło danych, a następnie śledzone są zmiany. W tym czasie zasób danych będzie miał status Uruchomiono. Oznacza to, że zmiany są stale śledzone i przesyłane po wykryciu. Dzięki temu dane do umieszczania w obszarze umieszczania są aktualne.

Na stronie głównej Data Services możesz zobaczyć status, datę i godzinę aktualizacji danych do umieszczania oraz liczbę tabel z błędami. Możesz również otworzyć zasób danych i wybrać kartę Tabele, aby wyświetlić podstawowe informacje o metadanych tabel.

Możesz szczegółowo monitorować postęp, otwierając zadanie replikacji w Qlik Enterprise Manager i wybierając widok Monitoruj.

W przypadku Qlik Cloud Landing (Amazon S3) po załadowaniu tabel tworzona jest nowa kopia pełnego załadowania. Oznacza to, że możesz ładować tabele, gdy aplikacje do umieszczania bez problemu odczytują zmiany.

Operacje na zasobie danych do umieszczania

Z menu zasobów można wykonać następujące operacje na zasobie danych do umieszczania.

  • Otwórz

    Powoduje otwarcie zasobu danych do umieszczania. Możesz wyświetlić strukturę tabeli i szczegóły dotyczące zasobu danych.

  • Edytuj

    Umożliwia edycję nazwy i opisu zasobu oraz dodawanie znaczników.

  • Zatrzymaj

    Powoduje zatrzymanie działania zasobu danych. Spowoduje to zatrzymanie zadania Replicate, a obszar umieszczania nie zostanie zaktualizowany o zmienione dane.

  • Wznów

    Umożliwia wznowienie działania zasobu danych od momentu, w którym został zatrzymany. Powoduje to także wznowienie działania zadania Replicate.

  • Usuń

    Powoduje usunięcie zasobu danych.

    Uwaga: Dane w obszarze umieszczania nie są usuwane. Należy je usunąć ręcznie.

Zalecamy, aby nie wykonywać zadania z Qlik Enterprise Manager z wyjątkiem ładowania tabel.

Operacje Załaduj miejsce docelowe na zadaniu Qlik Replicate

Jeśli potrzebujesz wykonać operację Załaduj miejsce docelowe w zadaniu Qlik Replicate, musisz usunąć i ponownie utworzyć zasoby danych do umieszczenia i pamięci, które są odczytywane z tego zadania, aby uniknąć utraty danych.

  1. Zatrzymaj zadanie Replicate, jeśli jeszcze się nie zatrzymało.

  2. Usuń zasób danych do umieszczania i zasób danych pamięci masowej.

  3. Utwórz nowy zasób danych do umieszczania za pomocą zadania Replicate.

  4. Utwórz nowy zasób danych w pamięci masowej używający tego zasobu danych do umieszczania.

  5. Uruchom zasób danych do umieszczania.

  6. Uruchom nowy zasób pamięci masowej.

Utrzymanie obszaru umieszczania

Automatyczne czyszczenie obszaru umieszczania nie jest obsługiwane. Może to wpłynąć negatywnie na wydajność.
Zalecamy ręczne czyszczenie starego pełnego załadowania i zmianę danych w obszarze umieszczania.

  • Amazon S3

    Jeśli istnieje kilka folderów z danymi pełnego załadowania, możesz usunąć wszystkie oprócz najnowszego folderu. Możesz także usunąć partycje danych zmiany, które zostały przetworzone.

  • Snowflake

    Możesz usunąć rekordy tabel zmian, które zostały przetworzone.