Propriétés du tGSGet Standard - 7.3

GS

Version
7.3
Language
Français
Product
Talend Big Data
Talend Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Real-Time Big Data Platform
Module
Studio Talend
Content
Création et développement > Systèmes tiers > Stockages Cloud > Composants Google > Composants GS
Gouvernance de données > Systèmes tiers > Stockages Cloud > Composants Google > Composants GS
Qualité et préparation de données > Systèmes tiers > Stockages Cloud > Composants Google > Composants GS
Last publication date
2024-02-22

Ces propriétés sont utilisées pour configurer le tGSGet s'exécutant dans le framework de Jobs Standard.

Le composant tGSGet Standard appartient aux familles Big Data et Cloud.

Le composant de ce framework est disponible dans tous les produits Talend.

Basic settings

Use an existing connection

Cochez cette case et sélectionnez le composant de connexion adéquat dans la liste Component list pour réutiliser les paramètres d'une connexion que vous avez déjà définie.

Credential type

Sélectionnez le type à utiliser pour vous authentifier à votre projet.

  • HMAC key (deprecated) : authentifiez-vous à l'aide de vos identifiants Oauth. Lorsque vous sélectionnez ce type, les paramètres à définir dans la vue Basic settings sont Access Key et Secret Key.
  • Service account : authentifiez-vous via un compte Google. Lorsque vous sélectionnez ce type, le paramètre à définir dans la vue Basic settings est Service account key.
  • OAuth Access Token : authentifiez-vous à l'aide d'un jeton d'accès OAuth. Lorsque vous sélectionnez ce mode, le paramètre à définir dans la vue Basic settings est OAuth Access Token.
Access Key et Secret Key

Saisissez les informations d'authentification obtenues de Google afin d'effectuer des requêtes sur Google Cloud Storage.

Ces clés peuvent être consultées dans la vue Interoperable Access, sous l'onglet Google Cloud Storage du projet dans la console d'API de Google.

Pour saisir la clé secrète, cliquez sur le bouton [...] à côté du champ Secret key, puis, dans la boîte de dialogue qui s'ouvre, saisissez le mot de passe entre guillemets doubles puis cliquez sur OK afin de sauvegarder les paramètres.

Pour plus d'informations concernant la clé d'accès et la clé secrète, rendez-vous sur https://developers.google.com/storage/docs/reference/v1/getting-startedv1?hl=en/ (en anglais) et consultez la description des clés développeur.

Ces deux champs sont disponibles lorsque la case Use an existing connection n'est pas cochée et que l'option HMAC key (deprecated) est sélectionnée dans la liste déroulante Credential type.

Service account key

Cliquez sur le bouton [...] près du champ Service account key afin de parcourir votre système jusqu'au fichier JSON contenant votre clé de compte de service.

Ce champ est disponible lorsque la case Use an existing connection n'est pas cochée et que l'option Service account est sélectionnée dans la liste déroulante Credential type.

OAuth Access Token

Saisissez un jeton d'accès.

La durée de vie d'un jeton d'accès est d'une heure. Le composant n'effectue pas d'opération d'actualisation du jeton mais récupère un nouveau jeton pour une opération après la limite d'une heure.

Ce champ est disponible lorsque la case Use an existing connection n'est pas cochée et que l'option OAuth Access Token est sélectionnée dans la liste déroulante Credential type.

Key prefix

Saisissez le préfixe afin de télécharger uniquement les objets dont les clés commencent par le préfixe défini.

Delimiter

Saisissez le séparateur afin de télécharger uniquement les objets avec des noms jusqu'à ce séparateur.

Specify project ID

Lorsque le type d'identifiant (Credential type) défini est HMAC key ou OAuth Access Token, cochez cette case et, dans le champ Project ID, saisissez l'ID du projet dont vous voulez obtenir des objets

Use keys

Cochez cette case et renseignez la table Keys afin de définir les critères pour les objets à télécharger depuis Google Cloud Storage.

  • Bucket name : saisissez le nom du bucket à partir duquel vous souhaitez télécharger des objets.

  • Key : saisissez la clé de l'objet à télécharger.

  • New name : saisissez un nouveau nom pour l'objet à télécharger.

Si vous cochez la case Use keys, les champs Key prefix et Delimiter, ainsi que les cases Specify project ID et Get files from bucket list ne sont pas disponibles.

Get files from bucket list

Cochez cette case et renseignez la table Bucket afin de définir les critères pour les objets à télécharger depuis Google Cloud Storage.

  • Bucket name : saisissez le nom du bucket à partir duquel vous souhaitez télécharger des objets.

  • Key prefix : saisissez le préfixe pour télécharger des objets dont les clés commencent par le préfixe spécifié dans le bucket défini.

  • Delimiter : saisissez le séparateur afin de télécharger les objets avec des noms clés jusqu'à ce séparateur depuis le bucket défini.

Si vous cochez la case Get files from bucket list, les champs Key prefix et Delimiter, ainsi que les cases Specify project ID et Use keys ne sont pas disponibles.

Output directory

Spécifiez le dossier dans lequel vous souhaitez stocker les objets téléchargés.

Die on error

Cette case est décochée par défaut, ce qui vous permet de terminer le traitement avec les lignes sans erreur, et d'ignorer les lignes en erreur.

Advanced settings

tStatCatcher Statistics

Cochez cette case pour collecter les métadonnées de traitement du Job au niveau du Job ainsi qu'au niveau de chaque composant.

Variables globales

Variables globales

NB_LINE : nombre de lignes lues par un composant d'entrée ou passées à un composant de sortie. Cette variable est une variable After et retourne un entier.

ERROR_MESSAGE : message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères. Cette variable fonctionne uniquement si la case Die on error est décochée, lorsque le composant contient cette case.

Une variable Flow fonctionne durant l'exécution d'un composant.

Pour renseigner un champ ou une expression à l'aide d'une variable, appuyez sur les touches Ctrl+Espace pour accéder à la liste des variables. À partir de cette liste, vous pouvez choisir la variable que vous souhaitez utiliser.

Pour plus d'informations concernant les variables, consultez le Guide d'utilisation du Studio Talend.

Utilisation

Règle d'utilisation

Ce composant est généralement utilisé avec d'autres composants Google Cloud Storage, par exemple le tGSPut.