Conditions et restrictions du système

Cette section décrit la configuration requise et les restrictions de Qlik Talend Cloud.

Avant de commencer, passez en revue les conditions pour vous assurer que vous avez tout ce dont vous avez besoin pour commencer.

Vous trouverez davantage d'informations sur le flux de travail et les composants système dans Intégration de données.

Conditions générales requises pour Qlik Talend Cloud

• Client sur Qlik Cloud ayant accès à Qlik Talend Data Integration. Cela nécessite l'un des abonnements suivants :

  • Qlik Talend Cloud pour pouvoir gérer des projets d'intégration de données.

    Qlik Talend Cloud est disponible sous forme d'options d'abonnement à quatre niveaux : Starter (Débutant), Standard, Premium et Enterprise. Les éditions supérieures fournissent des sources et transformations de données plus avancées. Cela inclut les fonctionnalités hébergées sur Qlik Cloud et sur Talend Cloud. L'ensemble des abonnements incluent Qlik Cloud Analytics - Standard.

  • Un abonnement Qlik Cloud Analytics permet d'accéder à Qlik Talend Data Integration pour créer des fichiers QVD sur une plateforme de données Qlik Cloud. Les fichiers QVD peuvent être utilisés dans des applications analytiques.

    Pour plus d'informations, consultez Options d'abonnement Qlik Cloud Analytics.

• L'utilisateur nécessite Droit Professional ou Full User et le rôle Contributeur Services de donnéespour pouvoir créer, gérer et exécuter des tâches de données dans Qlik Talend Data Integration.

• Note Qlik Cloud GovernmentMême si l'interface et les outils Qlik Talend Data Integration sont disponibles dans Qlik Cloud Government, ils ne sont pas fonctionnels sans licence, sauf pour créer des pipelines de données.

• Lorsque vous vous connectez à des sources de données, il se peut que vous deviez ajouter des adresses IP Qlik Cloud sous-jacentes à votre liste verte.

  Pour plus d'informations, consultez Placement des noms de domaine et des adresses IP en liste verte.

• Les connexions permettent d'établir une connexion aux plateformes de données cloud pour la livraison de données et les transformations push-down. Pour plus d'informations, consultez Configuration des connexions aux cibles.

• Si vous utilisez Data Movement gateway, les pilotes requis pour accéder à votre source de données et à votre plateforme cible doivent être installés sur le poste Data Movement gateway. Si vous utilisez une Data Movement gateway pour accéder à la source et une autre pour accéder à la cible, installez le ou les pilotes nécessaires pour accéder à la cible sur la Data Movement gateway cible et le pilote nécessaire pour accéder à votre source de données sur la Data Movement gateway source.

  Pour plus d'informations, consultez Configuration des connexions aux cibles.

Conditions requises pour le stockage de données

• Si vous déposez temporairement des données dans un compartiment Amazon S3, vous pouvez générer des tables QVD dans le stockage géré par Qlik Cloud ou dans le stockage Amazon S3 que vous gérez.

• Si vous déposez temporairement des données dans un entrepôt de données cloud tel que Snowflake ou Azure Synapse Analytics, vous pouvez générer des tables dans le même entrepôt de données cloud.

• Si vous déposez temporairement des données depuis une source de données cloud dans un entrepôt de données cloud, vous pouvez générer des tables dans le même entrepôt de données cloud.

Conditions requises pour les zones intermédiaires

Pour pouvoir déplacer des données vers des cibles de type entrepôt de données, vous avez besoin d'une zone intermédiaire :

• Azure Synapse Analytics

  Vous avez besoin d'une zone intermédiaire Azure Data Lake Storage.

• Google BigQuery

  Vous devez avoir une zone intermédiaire Google Cloud Storage.

• Databricks

  Vous avez besoin d'une zone intermédiaire dans Azure Data Lake Storage, Google Cloud Storage ou Amazon S3.

Conditions requises pour générer des tables QVD

• Compartiment Amazon S3 pour les données de zone intermédiaire avec accès en écriture depuis le poste du serveur Data Movement gateway et accès en lecture depuis le client Qlik Cloud.

  Note AvertissementVous devez vous assurer que la zone Destination est sécurisée. Vous pouvez utiliser un chiffrement côté serveur via les clés gérées par Amazon S3 ou les clés gérées par AWS KMS.

• Si vous souhaitez stocker des données Stockage (QVD) dans votre propre stockage géré plutôt que dans le stockage géré par Qlik, il vous faut un compartiment Amazon S3. Vous pouvez utiliser le même compartiment Amazon S3 que celui utilisé pour les données de dépôt temporaire, mais, dans ce cas, il faut également un accès en écriture depuis le client Qlik Cloud. Vous devez également utiliser des dossiers distincts pour les données de dépôt temporaire et le stockage.

  Note AvertissementVous devez vous assurer que le stockage géré est sûr. Vous pouvez utiliser un chiffrement côté serveur via les clés gérées par Amazon S3 ou les clés gérées par AWS KMS.

Limitations

Votre mode d'utilisation de Qlik Talend Data Integration présente certaines limitations.

Restrictions communes

• Les modifications apportées au schéma de la source de données ne sont pas supportées. Si vous apportez des modifications au schéma de la source de données, vous devez créer d'autres ressources de données.

• Il n'est pas possible de modifier le propriétaire d'une tâche de données ni de déplacer une tâche de données vers un autre projet.

• Le nettoyage automatique de la zone de dépôt temporaire n'est pas supporté. Cela peut affecter les performances. Nous recommandons d'effectuer des nettoyages manuels.

• Lors de l'application de modifications à des tables d'une ressource de données Stockage, il n'existe pas de cohérence transactionnelle entre les différentes tables de la tâche.

• Lorsqu'un schéma de base de données est associé à plus d'une tâche de données, chaque tâche de données doit utiliser un préfixe unique pour les tables et les vues. Vous pouvez définir le préfixe dans les paramètres de tâche de données.

• Deux tâches de déplacement de données ne doivent pas écrire dans la même table de la zone de dépôt temporaire. La bonne pratique consiste à utiliser une zone de dépôt temporaire distincte pour chaque passerelle de déplacement de données.

• La gestion des modifications n'est pas supportée pour les tables source sans clé primaire. Cela s'applique aux données intégrées et enregistrées.

Restrictions lors de la génération de tables QVD

• La taille maximale d'une table QVD générée est de 5 Go.

  Les espaces de données fonctionnent toujours avec une capacité standard qui limite la capacité de la tâche de données Stockage. La taille totale de chaque table traitée par la tâche de données Stockage, changements compris, doit être au maximum égale à la taille d'application (en mémoire) supportée pour les applications standard.

  Pour plus d'informations sur la capacité, voir Support des applications volumineuses.

• Assurez-vous que deux applications ne génèrent pas de tables QVD portant le même nom. La meilleure pratique consiste à conserver un dossier de sortie distinct pour chaque application.

Restrictions des entrepôts de données cloud

Limitations générales

• Tous les jeux de données sont écrits dans le même schéma interne et toutes les vues sont écrites dans le même schéma de ressource de données du stockage. Il n'est par conséquent pas autorisé d'avoir deux jeux de données portant le même nom dans différents schémas dans une seule tâche de données de dépôt temporaire.

Limitations de Snowflake

• L'authentification OAuth n'est pas prise en charge lors de la connexion à Snowflake.

Limitations de Google BigQuery

• Il n'est pas possible d'utiliser des espaces dans les noms de colonne.

• Si vous renommez ou supprimer des colonnes, les tables doivent être recréées et les données sont perdues.

• Les types de données paramétrés sont définis avec des valeurs par défaut :

  • Chaîne

    Longueur : 8192

  • Octets

    Longueur : 8192

  • Numérique

    Précision : 38

    Échelle : 9

  • bigDecimal

    Précision : 76

    Échelle : 38

• Par défaut, l'emplacement des connexions Google BigQuery est configuré sur les États-Unis. Si vous souhaitez utiliser un autre emplacement, vous devez le définir dans les propriétés de la connexion.

  1. Modifiez la connexion.

  2. Ajoutez une propriété nommée Emplacement sous Avancé.

  3. Définissez la valeur de la propriété sur l'emplacement que vous souhaitez utiliser.

  4. Cliquez sur Enregistrer.

Limitations de Databricks

• L'attribution de nouveaux noms aux tables et aux colonnes n'est pas prise en charge. La synchronisation après une attribution de nouveau nom entraîne la perte des données.

• Enable SSL doit être activé.