Ces propriétés sont utilisées pour configurer le tImpalaRow s'exécutant dans le framework de Jobs Standard.
Le composant tImpalaRow Standard appartient à la famille Big Data.
Le composant de ce framework est disponible dans tous les produits Talend avec Big Data et dans Talend Data Fabric.
Paramètres simples
Property type |
Peut être Built-in ou Repository. |
|
Built-In : propriétés utilisées ponctuellement sans stockage dans le référentiel. |
Repository : sélectionnez le fichier dans lequel sont stockées les propriétés du composant. Les champs suivants sont automatiquement renseignés à l'aide des données récupérées. | |
Use an existing connection |
Cochez cette case et sélectionnez le composant de connexion adéquat dans la liste Component list pour réutiliser les paramètres d'une connexion que vous avez déjà définie.
Remarque : Notez que lorsqu'un Job contient un Job parent et un Job enfant, si vous devez partager une connexion existante entre ces deux niveaux, par exemple pour partager la connexion créée par le Job parent au Job enfant, vous devez :
Pour un exemple de partage d'une connexion à une base de données à travers différents niveaux de Jobs, consultez le Guide d'utilisation du Studio Talend . |
Distribution |
Sélectionnez dans la liste le cluster que vous utilisez. Les options de la liste varient selon le composant que vous utilisez. Parmi ces options, les suivantes nécessitent une configuration spécifique :
|
Version |
Sélectionnez la version de la distribution Hadoop que vous utilisez. Les options disponibles dépendent du composant que vous utilisez. |
Impala Driver |
Dans la liste déroulante, sélectionnez le pilote que vous utilisez. |
Host |
Adresse IP du serveur de base de données. |
Port |
Numéro du port d'écoute du serveur de base de données. |
Database |
Saisissez dans ce champ le nom de la base de données. |
Username |
Données d'authentification de l’utilisateur ou l'utilisatrice de la base de données. |
Additional JDBC Setting |
Définissez des propriétés de connexion supplémentaires pour la connexion à la base de données que vous créez. Cette option n'est pas disponible si vous avez coché la case Use an existing connection dans la vue Basic settings. |
Use kerberos authentication |
Si vous accédez à un système Impala s'exécutant avec la sécurité Kerberos, cochez la case et saisissez le Principal Kerberos de ce système Impala.
Cette case est disponible ou non selon la distribution Hadoop à laquelle vous vous connectez. |
Schema et Edit Schema |
Un schéma est une description de lignes. Il définit le nombre de champs (colonnes) à traiter et à passer au composant suivant. Lorsque vous créez un Job Spark, évitez le mot réservé line lors du nommage des champs. Modifiez le schéma en cliquant sur Edit Schema. Si le schéma est en mode Repository, trois options sont disponibles :
|
|
Built-in : le schéma est créé et stocké localement pour ce composant seulement. Scénario associé : consultez le Guide d'utilisation de Studio Talend . |
|
Repository : le schéma existe déjà et est stocké dans le Repository. Ainsi, il peut être réutilisé. Scénario associé : Guide d'utilisation de Studio Talend . |
Table Name |
Nom de la table à traiter. |
Query type |
Peut être Built-in ou Repository. |
|
Built-in : renseignez manuellement l'instruction de requête ou construisez-la graphiquement à l'aide du SQLBuilder. |
|
Repository : sélectionnez la requête stockée dans le référentiel qui vous intéresse. Le champ Query est automatiquement renseigné. |
Guess Query |
Cliquez sur le bouton Guess Query afin de générer la requête correspondant au schéma de votre table dans le champ Query. |
Query |
Saisissez votre requête de base de données en faisant attention à ce que l'ordre des champs corresponde à celui défini dans le schéma. |
Die on error |
Cette case est cochée par défaut. Décochez-la pour ignorer les lignes en erreur et terminer le processus avec les lignes sans erreur. Si nécessaire, vous pouvez récupérer les lignes en erreur en utilisant un lien de type Row > Rejects. |
Paramètres avancés
Propagate QUERY's recordset |
Cochez cette case pour insérer les résultats de la requête dans une colonne du flux en cours. Sélectionnez cette colonne dans la liste use column. Remarque :
Cette option permet au composant d'avoir un schéma différent de celui du composant précédent. De plus, la colonne contenant le résultat de la requête doit être de type Object. Ce composant est généralement suivi du tParseRecordSet. |
tStatCatcher Statistics |
Cochez cette case afin de collecter les données au niveau du composant. |
Variables globales
Global Variables |
QUERY : requête traitée. Cette variable est une variable Flow et retourne une chaîne de caractères. ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case. Une variable Flow fonctionne durant l'exécution d'un composant. Une variable After fonctionne après l'exécution d'un composant. Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser. Pour plus d'informations concernant les variables, consultez le Guide d'utilisation du Studio Talend . |
Utilisation
Usage rule |
Ce composant offre la flexibilité des requêtes sur les bases de données et couvre toutes les possibilités de requêtes Impala SQL. |
Prérequis |
La distribution Hadoop doit être correctement installée afin de garantir les interactions avec le Studio Talend . La liste suivante présente des informations d'exemple relatives à MapR.
Pour plus d'informations concernant l'installation d'une distribution Hadoop, consultez le manuel correspondant à la distribution Hadoop que vous utilisez. |