Propriétés du tAzureStorageQueueInputLoop Standard - Cloud - 8.0

Azure Storage Queue

Version
Cloud
8.0
Language
Français
Product
Talend Big Data
Talend Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Real-Time Big Data Platform
Module
Studio Talend
Content
Création et développement > Systèmes tiers > Stockages Cloud > Composants Azure > Composants Azure Storage Queue
Gouvernance de données > Systèmes tiers > Stockages Cloud > Composants Azure > Composants Azure Storage Queue
Qualité et préparation de données > Systèmes tiers > Stockages Cloud > Composants Azure > Composants Azure Storage Queue
Last publication date
2024-02-21

Ces propriétés sont utilisées pour configurer le tAzureStorageQueueInputLoop s'exécutant dans le framework de Jobs Standard Job.

Le composant tAzureStorageQueueInputLoop Standard appartient à la famille Cloud.

Le composant de ce framework est disponible dans tous les produits Talend.

Basic settings

Property Type

Sélectionnez la manière de configurer les informations de connexion.

  • Built-In : les paramètres de connexion seront définis localement pour ce composant. Vous devez spécifier manuellement les valeurs pour toutes les propriétés de connexion.

  • Repository : les paramètres de connexion stockés centralement dans le Repository > Metadata seront réutilisés par ce composant.

    Vous devez cliquer sur le bouton [...] et, dans la boîte de dialogue Repository Content, sélectionnez les détails de connexion à réutiliser. Toutes les propriétés de connexion seront automatiquement renseignées.

Cette propriété n'est pas disponible lorsqu'un autre composant de connexion est sélectionné dans la liste Connection Component.

Connection Component

Sélectionnez dans la liste déroulante le composant dont les informations de connexion seront utilisées pour configurer la connexion à Azure Storage.

Account Name

Saisissez le nom du compte de stockage auquel vous devez accéder. Vous pouvez trouver un nom de compte de stockage dans le dashboard Storage accounts du système Microsoft Azure Storage à utiliser. Assurez-vous que l'administrateur du système a donné les droits d'accès appropriés à ce compte de stockage.

Authentication type

Configurez le type d'authentification pour vous connecter à Microsoft Azure Blob Storage : Basic, Azure Active Directory ou Managed identities.

Remarque : L'option Managed identities est disponible uniquement lorsque vous avez installé la mise à jour mensuelle 8.0.1-R2023-03 du Studio Talend ou une plus récente fournie par Talend. Pour plus d'informations, contactez votre administrateur ou administratrice.
Region (Région) Sélectionnez l'une des régions Azure suivantes dans la liste déroulante.
  • Azure Global
  • Azure Chine
  • Azure Allemagne
  • Azure Government
  • Azure Custom (personnalisée)
Vous pouvez utiliser une région Azure personnalisée en sélectionnant l'option Azure Custom et en saisissez le suffixe de l'endpoint, ainsi que l'URL de l'hôte de l'autorité, respectivement dans les champs Endpoint suffix et Authority host. Note that the authority host URL is required when Azure Active Directory is selected from the Authentication type drop-down list.

Cette liste déroulante n'est pas disponible lorsque l'option Managed identities est sélectionnée dans la liste déroulante Authentication type.

Remarque : La liste déroulante Region est disponible uniquement lorsque vous avez installé la mise à jour mensuelle 8.0.1-R2023-03 du Studio Talend ou une plus récente fournie par Talend. Pour plus d'informations, contactez votre administrateur ou administratrice.

Account Key

Saisissez la clé associée au compte de stockage auquel vous devez accéder. Deux clés sont disponibles pour chaque compte. Par défaut, n'importe laquelle peut être utilisée pour accéder au compte. Sélectionnez dans la liste déroulante le composant dont les informations de connexion seront utilisées pour configurer la connexion à Azure Storage.

Cette option est disponible uniquement lorsque l'option Basic est sélectionnée dans la liste déroulante Authentication type.

Protocol

Sélectionnez le protocole de la connexion à créer.

Cette option est disponible uniquement lorsque l'option Basic est sélectionnée dans la liste déroulante Authentication type.

Use Azure Shared Access Signature

Cochez cette case pour utiliser une signature d'accès partagé pour accéder aux ressources du stockage sans utiliser de clé de compte. Pour plus d'informations, consultez Utilisation des signatures d'accès partagé (SAP).

Dans le champ Azure Shared Access Signature qui s'affiche, saisissez votre signature d'accès partagé entre guillemets doubles. Vous pouvez obtenir l'URL de la signature d'accès partagé pour chaque service autorisé sur le portail de Microsoft Azure, après génération de la signature. Le format de l'URL est le suivant : https://<$storagename>.<$service>.core.windows.net/<$sastoken>, où <$storagename> est le nom du compte de stockage, <$service> le nom du service autorisé (blob, file, queue ou table) et <$sastoken> est la valeur du jeton de signature d'accès partagé. Pour plus d'informations, consultez Constructing the Account SAS URI (en anglais).

Notez que SAS a une période de validité. Vous pouvez configurer l'heure de début de validité de SAS et son heure d'expiration, après laquelle SAS n'est plus valide lors de la génération. Vous devez vous assurer que votre SAS est toujours valide lorsque vous exécutez votre Job.

Cette option est disponible uniquement lorsque l'option Basic est sélectionnée dans la liste déroulante Authentication type.

Tenant ID

Saisissez l'ID du tenant Azure AD. Consultez Obtenir un jeton à partir d’Azure AD pour autoriser les requêtes à partir d’une application cliente pour plus d'informations.

Cette option est disponible uniquement lorsque vous sélectionnez Azure Active Directory dans la liste déroulante Authentication method (Méthode d'authentification).

Client ID

Saisissez l'ID du client de votre application. Consultez Obtenir un jeton à partir d’Azure AD pour autoriser les requêtes à partir d’une application cliente pour plus d'informations.

Cette option est disponible uniquement lorsque vous sélectionnez Azure Active Directory dans la liste déroulante Authentication method (Méthode d'authentification).

Client Secret

Saisissez le secret du client de votre application. Consultez Obtenir un jeton à partir d’Azure AD pour autoriser les requêtes à partir d’une application cliente pour plus d'informations.

Cette option est disponible uniquement lorsque vous sélectionnez Azure Active Directory dans la liste déroulante Authentication method (Méthode d'authentification).

Queue name

Spécifiez le nom de la file Azure de laquelle récupérer les messages.

Schema et Edit schema

Un schéma est une description de lignes. Il définit le nombre de champs (colonnes) à traiter et à passer au composant suivant. Lorsque vous créez un Job Spark, évitez le mot réservé line lors du nommage des champs.

  • Built-in : le schéma est créé et conservé localement pour ce composant seulement.

  • Repository : le schéma existe déjà et est stocké dans le Repository. Ainsi, il peut être réutilisé dans des Jobs et projets.

Le schéma de ce composant est prédéfini et contient les colonnes suivantes.

  • MessageId : ID du message.
  • MessageContent : corps du message.
  • InsertionTime : l'heure à laquelle le message a été ajouté à la file.
  • ExpirationTime : l'heure à laquelle le message va expirer.
  • NextVisibleTime : l'heure à laquelle le message sera à nouveau visible.
  • DequeueCount : nombre de fois que le message a été retiré de la file. Cette valeur est incrémentée chaque fois que le message est retiré de la file, mais n'est pas incrémentée lorsque le message est regardé.
  • PopReceipt : valeur de l'accusé réception pop requis pour supprimer le message.

Créez le schéma en cliquant sur le bouton Edit Schema. Si le schéma est en mode Repository, trois options sont disponibles :

  • View schema : sélectionnez cette option afin de voir uniquement le schéma.

  • Change to built-in property : sélectionnez cette option pour passer le schéma en mode Built-In et effectuer des modifications locales.

  • Update repository connection : sélectionnez cette option afin de modifier le schéma stocké dans le référentiel et décider de propager ou non les modifications à tous les Jobs.

    Si vous souhaitez propager les modifications uniquement au Job courant, cliquez sur No et sélectionnez à nouveau la métadonnée du schéma dans la fenêtre Repository Content.

Number of messages

Saisissez le nombre de messages à récupérer de la file en une fois, jusqu'à 32.

Loop wait time

Spécifiez (en secondes) la durée durant laquelle la boucle attend que le message arrive dans la file, avant de recommencer la boucle.

Die on error

Cochez cette case pour arrêter l'exécution du Job lorsqu'une erreur survient.

Advanced settings

tStatCatcher Statistics

Cochez cette case pour collecter les métadonnées de traitement du Job, aussi bien au niveau du Job qu'au niveau de chaque composant.

Global Variables

NB_LINE

Nombre de lignes traitées. Cette variable est une variable After et retourne un entier.

QUEUE_NAME

Nom de la file Azure. Cette variable est une variable After et retourne une chaîne de caractères.

ERROR_MESSAGE

Message d'erreur généré par le composant lorsqu'une erreur survient. Cette variable est une variable After et retourne une chaîne de caractères.

Utilisation

Règle d'utilisation

Ce composant est généralement utilisé comme composant de début dans un Job ou un sous-Job et nécessite un lien de sortie.