Presentation av Qlik Talend Data Integration
Du kan överföra data som är klara att användas i Qlik Cloud eller till molndatalager som Snowflake, Google Cloud BigQuery, och Azure Synapse Analytics med Qlik Talend Data Integration. Datakällor kan finnas på plats lokalt eller i molnet. Data kan hållas uppdaterade utan manuell åtgärd med hjälp av CDC (Change Data Capture) eller batchteknik, som schemalagda laddningar. Du kan skapa en datapipeline och utföra omvandlingar anpassade för ändamålet och skapa datamarter.
Du kan komma åt startsidan för Qlik Talend Data Integration genom att välja dataintegrering från startmenyn (
).
Mer information om arkitekturen i Qlik Talend Data Integration finns i Arkitektur för datauppsättningar i ett datalager i molnet.
Prenumerationsalternativ
Qlik Talend Cloud-prenumerationer baseras på en kapacitetsmodell där volymen Flyttade data är den primära värdemätaren.
Qlik Talend Cloud är tillgängligt i prenumerationsalternativ från fyra nivåer: Starter, Standard, Premium och Enterprise. De högre utgåvorna ger mer avancerade datakällor och omvandlingar. Detta inkluderar funktioner som finns på Qlik Cloud och Talend Cloud. Alla prenumerationer inkluderar Qlik Cloud-analys standard.
Mer information om prenumerationer finns i Prenumerationsalternativ för Qlik Talend Cloud.
Datautrymmen
Datautrymmen är styrda områden i Qlik Cloud-klientorganisationen där projekt skapas och lagras. I utrymmet kan du också skapa nya anslutningar med kopplingar och hantera åtkomst till gatewayer för dataflytt. Alla datatillgångar kommer att skapas i samma utrymme som det projekt som de tillhör.
Mer information finns i Arbeta i utrymmen i Qlik Talend Data Integration.
Projekt
Ett projekt är där du skapar ditt dataintegreringsflöde, med hjälp av datauppgifter. Projektet är kopplat till en dataplattform som används som mål för all utdata. Du kan skapa ett projekt med endera av följande användningsfall:
-
Datapipeline
Skapa en enkel linjär datapipeline, eller en komplex pipeline som använder flera datakällor och genererar mycket utdata.
-
Replikering
Replikera data från valfri datakälla som stöds till valfritt mål som stöds.
Datauppgift
En datauppgift är huvudenheten för arbete i ett projekt. Du kan skapa följande typer av dataarbetsuppgifter i ett projekt. Du skapar en ny datauppgift genom att klicka på Lägg till ny i det övre fältet och sedan på den aktuella uppgiften.
Datauppgifter i datapipelineprojekt
-
Mellanlagring
Kopiera data från en datakälla till ett mellanlagringsområde. Datakällor kan finnas på plats lokalt eller i molnet. Mellanlagringsområdet kan vara ett molnbaserat mål eller en Amazon S3-databucket (endast när QVD-datauppsättningar skapas).
Du kan hålla data uppdaterade utan manuella åtgärder genom att använda CDC, eller genom att utföra fullständiga laddningar som är schemalagda för att laddas regelbundet.
-
Registrerade data
Registrera data som redan finns på dataplattformen. Det innebär att du kan använda data som har introducerats med andra verktyg än Qlik Talend Data Integration, till exempel Qlik Replicate.
-
Lagringsplats
Skapa datauppsättningar som kan användas direkt i ett molndatalager, eller i Qlik Cloud från data som har kopierats av mellanlagringsdatauppgiften. Datauppsättningarna kan hållas uppdaterade med mellanlagringsdata utan manuell åtgärd.
-
Transformering
Skapa återanvändbara omvandlingar baserat på regler och anpassad SQL som en del av din datapipeline. Du kan utföra omvandlingar på radnivå och skapa datauppsättningar som antingen materialiseras som tabeller, eller skapas som vyer som utför omvandlingar direkt.
-
Datamart
Skapa datamarter för att utnyttja dina lagrings- eller omvandlings-datauppgifter. Du kan skapa valfritt antal datamarter beroende på dina affärsbehov. Helst ska dina datamarter innehålla databaser med sammanfattade data som samlats in för analys av ett särskilt delavsnitt eller enhet i en organisation.
Datauppgifter i replikeringsprojekt
-
Replikering
Replikera data från datakällor som stöds till valfritt mål som stöds.
-
Mellanlagring i sjö
Mellanlagra data till datasjö.
Mellanlagring av data i en datasjö med en Standard-, Premium- eller Enterprise-prenumeration
Övervaka dina dataarbetsuppgifter
Du kan övervaka status och förlopp för dina datauppgifter med övervaka-vyer. Med en övervaka-vy kan du visa status för alla datauppgifter i klientorganisationen eller en delmängd av datauppgifter, baserat på ett filter. Du kan skapa flera vyer för att övervaka olika aspekter av dina datapipelines. Mer information finns här Övervaka och utföra dina datauppgifter.
Dataprodukter
Datauppsättningar som har registrerats från ett dataprojekt eller en manuell uppladdning och lagts till i din katalog kan sedan grupperas och paketeras i form av en dataprodukt. Du kan t.ex. gruppera datauppsättningar efter affärsområde och göra dem tillgängliga på datamarknadsplatsen så att analyskonsumenter kan använda dem i appar. Mer information finns här Arbeta med dataprodukter.
Kopplingar
Kopplingar används för att dataarbetsuppgifter ska få tillgång till datakällor, extern lagring och målplattformar för dataleverans och pushdown-omvandlingar.
Hantera dina kopplingar
Klicka på Kopplingar på vänster sida för att visa alla dina kopplingar.
Du kan redigera kopplingar som du äger.
Anteckning om informationDu kan också redigera alla kopplingar i ett datautrymme där du är ägare eller har en Kan hantera-roll.Klicka på ... och därefter på Redigera.
Du kan testa en koppling.
Klicka på ... och sedan på Testa koppling.
Du kan ta bort en koppling.
Klicka på ... och därefter på Ta bort.
Skapa en koppling
Det finns flera sätt att skapa kopplingar:
Klicka på Kopplingar till vänster och sedan på Skapa koppling.
Klicka på Skapa ny i konfigurationsguider för datauppgifter där du väljer datakoppling.
Klicka på Skapa koppling i vyn Kopplingar.
Du kan filtrera kopplingar via:
Kategori
Datalager, Molnlagring, Databas och Program.
Typ
Källa eller Mål.
Du kan också välja bland nyligen använda kopplingar.
Du väljer datakällans typ, och sedan anger du adress och autentiseringsinformation.
Se även: