Einführung in Qlik Talend Data Integration
Sie können für die Nutzung bereite Daten an Qlik Cloud oder an Cloud Data Warehouses wie beispielsweise Snowflake, Google Cloud BigQuery und Azure Synapse Analytics mit Qlik Talend Data Integration bereitstellen. Die Datenquellen können lokal sein oder sich in der Cloud befinden. Mithilfe der CDC-Technologie (Change Data Capture) oder Batch-Technologien wie geplanten Ladevorgängen können die Daten ohne manuellen Eingriff aktuell gehalten werden. Sie können eine Daten-Pipeline erstellen und Umwandlungen für bestimmte Zwecke durchführen und Data Marts erstellen.
Sie können auf die Startseite von Qlik Talend Data Integration zugreifen, indem Sie Datenintegration aus dem Starter-Menü () auswählen.
Weitere Informationen zur Architektur von Qlik Talend Data Integration finden Sie unter Dataset-Architektur in einem Cloud Data Warehouse.
Abonnementoptionen
Qlik Talend Cloud-Abonnements basieren auf einem Kapazitätsmodell, bei dem das Volumen der bewegten Daten den wichtigsten Messwert darstellt.
Qlik Talend Cloud ist mit Abonnementoptionen in vier Stufen verfügbar: Starter, Standard, Premium und Enterprise. Die höheren Editionen bieten erweiterte Datenquellen und Umwandlungen. Dies umfasst Funktionen, die auf Qlik Cloud und Talend Cloud gehostet sind. Alle Abonnements enthalten Qlik Cloud Analytics Standard.
Weitere Informationen zu Abonnementoptionen finden Sie unter Qlik Talend Cloud Abonnementoptionen.
Datenbereiche
Datenbereiche sind kontrollierte Bereiche Ihres Qlik Cloud Mandanten, die zum Erstellen und Speichern von Projekten verwendete werden. Innerhalb des Bereichs können Sie auch neue Verbindungen anhand von Konnektoren erstellen und den Zugriff auf Data Movement Gateways verwalten. Alle Datenobjekte werden im Bereich des Projekts erstellt, zu dem sie gehören.
Weitere Informationen finden Sie unter Arbeiten in Bereichen in Qlik Talend Data Integration.
Projekte
In einem Projekt erstellen Sie den Datenintegrationsfluss mithilfe von Datenaufgaben. Das Projekt wird mit einer Datenplattform verknüpft, die als Ziel für alle Ausgaben verwendet wird. Sie können ein Projekt mit einem der folgenden Anwendungsfälle erstellen:
-
Daten-Pipeline
Erstellen Sie eine einfache, lineare Pipeline oder eine komplexe Pipeline, die mehrere Datenquellen nutzt und zahlreiche Ausgaben erstellt.
-
Replikation
Replizieren Sie Daten von unterstützen Datenquellen an jedes unterstützte Ziel oder stellen Sie Daten an einen Data Lake bereit.
Datenaufgabe
Eine Datenaufgabe ist die Hauptarbeitseinheit in einem Projekt. Sie können Datenaufgaben der folgenden Typen in einem Projekt erstellen. Sie erstellen eine neue Datenaufgabe, indem Sie in der oberen Leiste auf Neu hinzufügen und dann auf die entsprechende Aufgabe klicken.
Datenaufgaben in Daten-Pipeline-Projekten
-
Bereitstellung
Kopieren Sie Daten aus einer Datenquelle in einen Bereitstellungsbereich. Die Datenquellen können lokal sein oder sich in der Cloud befinden. Der Bereitstellungsbereich kann ein Cloud-Ziel oder Amazon S3-Daten-Bucket (nur wenn QVD-Datensätze erstellt werden) sein.
Sie können Daten ohne manuellen Eingriff aktualisiert halten, indem Sie CDC verwenden oder regelmäßig geplante vollständige Ladevorgänge durchführen.
-
Registrierte Daten
Registrieren Sie bereits in der Datenplattform vorhandene Daten. Damit können Daten nach dem Onboarding mit anderen Tools als Qlik Talend Data Integration verwendet werden, z. B. Qlik Replicate.
Registrieren von Daten, die bereits in der Datenplattform vorhanden sind
-
Speicher
Erstellen Sie zur Nutzung bereite Datensätze in einem Cloud Data Warehouse oder in Qlik Cloud aus den Daten, die von der Bereitstellungsdatenaufgabe kopiert wurden. Die Datensätze werden ohne manuellen Eingriff mit den Bereitstellungsdaten aktuell gehalten.
-
Umwandeln
Erstellen Sie wiederverwendbare Datenumwandlungen basierend auf Regeln und benutzerdefinierter SQL als Teil Ihrer Daten-Pipeline. Sie können Umwandlungen auf Zeilenebene durchführen und Datensätze erstellen, die entweder als Tabelle umgesetzt oder als Ansichten erstellt werden, in denen Umwandlungen direkt bei Bedarf durchgeführt werden.
-
Data Mart
Erstellen Sie Data Marts, um Ihre Speicher-Datenaufgaben oder Umwandlungs-Datenaufgaben zu nutzen. Je nach Ihren geschäftlichen Anforderungen können Sie eine beliebige Anzahl Data Marts erstellen. Im Idealfall enthalten Ihre Data Marts Repositorys zusammengefasster Daten, die für die Analyse eines bestimmten Bereichs oder einer Abteilung in einer Organisation erfasst wurden.
Datenaufgaben in Replikationsprojekten
-
Replikation
Replizieren Sie Daten von unterstützen Datenquellen an jedes unterstützte Ziel.
-
Lake-Bereitstellung
Stellen Sie Daten an einen Data Lake bereit.
Bereitstellen von Daten in einem Data Lake mit einem Standard-, Premium- oder Enterprise-Abonnement
Überwachen von Datenaufgaben
Mit Überwachungsansichten können Sie den Status und Fortschritt Ihrer Datenaufgaben überwachen. In einer Überwachungsansicht können Sie den Status aller Datenaufgaben bzw. eines Teils der Datenaufgaben nach Filterung im Mandanten anzeigen. Sie können mehrere Filter erstellen, um verschiedene Aspekte Ihrer Daten-Pipelines zu überwachen. Weitere Informationen finden Sie unter Überwachen und Durchführen von Datenaufgaben.
Datenprodukte
Datensätze, die über ein Datenprojekt oder einen manuellen Upload registriert und zu Ihrem Katalog hinzugefügt wurden, können dann in Form eines Datenprodukts gruppiert und verpackt werden. Sie können Datensätze beispielsweise nach Geschäftsdomäne gruppieren und im Data Marketplace verfügbar machen, damit sie von Analysebenutzern in Apps verwendet werden können. Weitere Informationen finden Sie unter Arbeiten mit Datenprodukten.
Verbindungen
Mithilfe von Verbindungen können Datenaufgaben auf Datenquellen, auf externen Speicher und auf Zielplattformen zugreifen, um Daten bereitzustellen und Push-Down-Umwandlungen vorzunehmen.
Verwalten von Verbindungen
Klicken Sie links auf Verbindungen, um alle Ihre Verbindungen anzuzeigen.
Sie können Verbindungen bearbeiten, deren Besitzer Sie sind.
InformationshinweisSie können auch alle Verbindungen in einem Datenbereich bearbeiten, in dem Sie der Besitzer sind oder die Rolle „Kann Bereich verwalten“ haben.Klicken Sie auf ... und dann auf Bearbeiten.
Sie können eine Verbindung testen.
Klicken Sie auf ... und dann auf Verbindung testen.
Sie können eine Verbindung löschen.
Klicken Sie auf ... und dann auf Löschen.
Erstellen einer Verbindung
Es gibt verschiedene Möglichkeiten zum Erstellen von Verbindungen:
Klicken Sie links auf Verbindungen und dann auf Verbindung erstellen.
Klicken Sie in den Assistenten zum Einrichten von Datenaufgaben auf Neu erstellen und wählen Sie eine Verbindung aus.
Klicken Sie in der Ansicht Verbindungen auf Verbindung erstellen.
Sie können Konnektoren nach folgenden Elementen filtern:
Kategorie
Data Warehouse, Cloud-Speicher, Datenbank und Anwendung.
Typ
Quelle oder Ziel.
Sie können auch aus kürzlich verwendeten Konnektoren auswählen.
Sie müssen den Datenquellentyp auswählen und dann die Adresse und die Authentifizierungsinformationen eingeben.
Siehe auch: