Accéder au contenu principal Passer au contenu complémentaire

Propriétés du tImpalaLoad Standard

Ces propriétés sont utilisées pour configurer le tImpalaLoad s'exécutant dans le framework de Jobs Standard.

Le composant tImpalaLoad Standard appartient à la famille Big Data.

Le composant de ce framework est disponible dans tous les produits Talend avec Big Data et dans Talend Data Fabric.

Basic settings

Property type

Peut être Built-in ou Repository.

 

Built-In : propriétés utilisées ponctuellement.

 

Repository : sélectionnez le référentiel dans lequel sont stockées les propriétés. Les champs suivants sont automatiquement renseignés à l'aide des données récupérées.

Use an existing connection

Cochez cette case et sélectionnez le composant de connexion adéquat dans la liste Component list pour réutiliser les paramètres d'une connexion que vous avez déjà définie.

Note InformationsRemarque : Lorsqu'un Job contient un Job parent et un Job enfant, si vous devez partager une connexion existante entre ces deux niveaux, par exemple pour partager la connexion créée par le Job parent au Job enfant, procédez comme suit.
  1. au niveau du Job parent, enregistrer la connexion à la base de données à partager dans la vue Basic settings du composant de connexion créant cette connexion à la base de données.
  2. au niveau du Job enfant, utiliser un composant de connexion dédié afin de lire cette connexion enregistrée.

Pour un exemple de partage d'une connexion à une base de données à travers différents niveaux de Jobs, consultez Partager une connexion à une base de données.

Impala Driver

Dans la liste déroulante, sélectionnez le pilote que vous utilisez.

Host

Adresse IP du serveur de base de données.

Port

Numéro du port d'écoute du serveur de base de données.

Database

Saisissez dans ce champ le nom de la base de données.

Additional JDBC Setting

Définissez des propriétés de connexion supplémentaires pour la connexion à la base de données que vous créez.

Cette option n'est pas disponible si vous avez coché la case Use an existing connection dans la vue Basic settings.

Username et Password

Saisissez les informations d'authentification de l'utilisateur ou de l'utilisatrice de la base de données afin de vous authentifier avec LDAP.

Pour saisir le mot de passe, cliquez sur le bouton [...] à côté du champ Password, puis, dans la boîte de dialogue qui s'ouvre, saisissez le mot de passe entre guillemets doubles et cliquez sur OK afin de sauvegarder les paramètres.

Ces paramètres ne sont pas disponibles lorsque vous cochez la case Use kerberos authentication.

Use kerberos authentication

Si vous accédez à un système Impala s'exécutant avec la sécurité Kerberos, cochez la case et saisissez le Principal Kerberos de ce système Impala.

Load action

Sélectionnez l'action à effectuer pour écrire des données à l'emplacement spécifié.

  • Lorsque vous sélectionnez LOAD, cela permet de déplacer ou copier des données depuis un répertoire spécifié.
    Note InformationsRemarque : Avec Cloudera Data Platform (CDP), si vous chargez une table, la table ne doit pas être de type ACID pour fonctionner correctement.
  • Lorsque vous sélectionnez INSERT, cela permet de déplacer ou copier des données à partir de requêtes.

Target type

Cette liste déroulante apparaît uniquement lorsque vous avez sélectionné INSERT dans la liste Load action.

Sélectionnez dans cette liste le type d'emplacement dans lequel écrire des données.

  • Si vous sélectionnez Table comme destination, vous pouvez choisir d'écrire les données à la suite ou d'écraser le contenu dans la table spécifiée. Il s'agit de la seule option dans la version actuelle.

Action

Sélectionnez OVERWRITE pour écraser les données existantes à l'emplacement de destination ou sélectionnez APPEND pour écrire les nouvelles données à la suite des anciennes.

Table Name

Saisissez le nom de la table Hive dans laquelle écrire les données.

Notez qu'avec l'action INSERT, ce champ est disponible uniquement lorsque vous avez sélectionné Table dans la liste Target type.

File path

Saisissez le répertoire duquel lire des données.

Query

Ce champ apparaît uniquement lorsque vous avez sélectionné INSERT dans la liste Load action.

Saisissez la requête appropriée pour sélectionner les données à exporter dans la table ou le répertoire Hive spécifié(e).

Set partitions

Cochez cette case pour utiliser la clause Impala Partition pour charger ou insérer des données dans une table Impala. Vous devez saisir les clés de partition et leur valeur à utiliser dans le champ qui apparaît.

Par exemple, saisissez contry='US', state='CA'. Cela permet de créer une clause de partition Partition (contry='US', state='CA'), c'est-à-dire une partition US and CA.

Il est également recommandé de cocher la case Create partition if not exist qui apparaît afin de vous assurer de ne pas créer une partition en doublon.

Die on error

Cochez cette case si vous souhaitez arrêter le Job en cas d'erreur.

Advanced settings

tStatCatcher Statistics

Cochez cette case pour collecter les données de log au niveau des composants.

Variables globales

Variables globales

QUERY : requête en cours de traitement. Cette variable est une variable Flow et retourne une chaîne de caractères.

ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case.

Une variable Flow fonctionne durant l'exécution d'un composant. Une variable After fonctionne après l'exécution d'un composant.

Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser.

Pour plus d'informations concernant les variables, consultez Utiliser les contextes et les variables.

Utilisation

Règle d'utilisation

Ce composant fonctionne en standalone.

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – dites-nous comment nous améliorer !