Propriétés du tImpalaLoad Standard
Ces propriétés sont utilisées pour configurer le tImpalaLoad s'exécutant dans le framework de Jobs Standard.
Le composant tImpalaLoad Standard appartient à la famille Big Data.
Le composant de ce framework est disponible dans tous les produits Talend avec Big Data et dans Talend Data Fabric.
Basic settings
Property type |
Peut être Built-in ou Repository. |
|
Built-In : propriétés utilisées ponctuellement. |
|
Repository : sélectionnez le référentiel dans lequel sont stockées les propriétés. Les champs suivants sont automatiquement renseignés à l'aide des données récupérées. |
Use an existing connection |
Cochez cette case et sélectionnez le composant de connexion adéquat dans la liste Component list pour réutiliser les paramètres d'une connexion que vous avez déjà définie. Note InformationsRemarque : Notez que lorsqu'un Job contient un Job parent et un Job enfant, si vous devez partager une connexion existante entre ces deux niveaux, par exemple pour partager la connexion créée par le Job parent au Job enfant, vous devez :
Pour un exemple de partage d'une connexion à une base de données à travers différents niveaux de Jobs, consultez le Guide d'utilisation du Studio Talend . |
Distribution |
Sélectionnez dans la liste le cluster que vous utilisez. Les options de la liste varient selon le composant que vous utilisez. Parmi ces options, les suivantes nécessitent une configuration spécifique :
|
Version |
Sélectionnez la version de la distribution Hadoop que vous utilisez. Les options disponibles dépendent du composant que vous utilisez. |
Impala Driver |
Dans la liste déroulante, sélectionnez le pilote que vous utilisez. |
Host |
Adresse IP du serveur de base de données. |
Port |
Numéro du port d'écoute du serveur de base de données. |
Database |
Saisissez dans ce champ le nom de la base de données. |
Additional JDBC Setting |
Définissez des propriétés de connexion supplémentaires pour la connexion à la base de données que vous créez. Cette option n'est pas disponible si vous avez coché la case Use an existing connection dans la vue Basic settings. |
Username et Password |
Saisissez les informations d'authentification de l'utilisateur ou de l'utilisatrice de la base de données afin de vous authentifier avec LDAP. Pour saisir le mot de passe, cliquez sur le bouton [...] à côté du champ Password, puis, dans la boîte de dialogue qui s'ouvre, saisissez le mot de passe entre guillemets doubles et cliquez sur OK afin de sauvegarder les paramètres. Ces paramètres ne sont pas disponibles lorsque vous cochez la case Use kerberos authentication. |
Use kerberos authentication |
Si vous accédez à un système Impala s'exécutant avec la sécurité Kerberos, cochez la case et saisissez le Principal Kerberos de ce système Impala.
Cette case est disponible ou non selon la distribution Hadoop à laquelle vous vous connectez. |
Load action |
Sélectionnez l'action à effectuer pour écrire des données à l'emplacement spécifié.
|
Target type |
Cette liste déroulante apparaît uniquement lorsque vous avez sélectionné INSERT dans la liste Load action. Sélectionnez dans cette liste le type d'emplacement dans lequel écrire des données.
|
Action |
Sélectionnez OVERWRITE pour écraser les données existantes à l'emplacement de destination ou sélectionnez APPEND pour écrire les nouvelles données à la suite des anciennes. |
Table Name |
Saisissez le nom de la table Hive dans laquelle écrire les données. Notez qu'avec l'action INSERT, ce champ est disponible uniquement lorsque vous avez sélectionné Table dans la liste Target type. |
File path |
Saisissez le répertoire duquel lire des données. |
Query |
Ce champ apparaît uniquement lorsque vous avez sélectionné INSERT dans la liste Load action. Saisissez la requête appropriée pour sélectionner les données à exporter dans la table ou le répertoire Hive spécifié(e). |
Set partitions |
Cochez cette case pour utiliser la clause Impala Partition pour charger ou insérer des données dans une table Impala. Vous devez saisir les clés de partition et leur valeur à utiliser dans le champ qui apparaît. Par exemple, saisissez contry='US', state='CA'. Cela permet de créer une clause de partition Partition (contry='US', state='CA'), c'est-à-dire une partition US and CA. Il est également recommandé de cocher la case Create partition if not exist qui apparaît afin de vous assurer de ne pas créer une partition en doublon. |
Die on error |
Cochez cette case si vous souhaitez arrêter le Job en cas d'erreur. |
Advanced settings
tStatCatcher Statistics |
Cochez cette case pour collecter les données de log au niveau des composants. |
Variables globales
Variables globales |
QUERY : requête en cours de traitement. Cette variable est une variable Flow et retourne une chaîne de caractères. ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case. Une variable Flow fonctionne durant l'exécution d'un composant. Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser. Pour plus d'informations concernant les variables, consultez le Guide d'utilisation du Studio Talend. |
Utilisation
Règle d'utilisation |
Ce composant fonctionne en standalone. |
Prérequis |
La distribution Hadoop doit être correctement installée afin de garantir les interactions avec le Studio Talend . La liste suivante présente des informations d'exemple relatives à MapR.
Pour plus d'informations concernant l'installation d'une distribution Hadoop, consultez le manuel correspondant à la distribution Hadoop que vous utilisez. |