Talend Cloud Management Console - Cloud - 7.3

Notes de version de Talend
Version
Cloud
7.3
Language
Français
Product
Talend Big Data
Talend Big Data Platform
Talend Cloud API Services Platform
Talend Cloud Big Data
Talend Cloud Big Data Platform
Talend Cloud Data Integration
Talend Cloud Data Management Platform
Talend Cloud Real-Time Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Real-Time Big Data Platform
Module
Studio Talend
Talend Cloud API Designer
Talend Cloud API Tester
Talend Cloud Data Inventory
Talend Cloud Data Preparation
Talend Cloud Data Stewardship
Talend Cloud Management Console
Talend Cloud Pipeline Designer
Talend Data Preparation
Talend Data Stewardship
Content
Installation et mise à niveau
Notes de version

Nouvelles fonctionnalités

Fonctionnalité Description
Paramètres du SSO pour une configuration multi-tenant Lorsque vous devez configurer le SSO pour plusieurs comptes (tenants multiples) dans Talend Cloud Management Console, utilisez l'ID des comptes pour définir l'ID de l'entité unique de chaque compte dans votre application SSO. Par exemple, https://iam.us.cloud.talend.com/oidc/ssologin/<your_account_ID> comme ID d'entité pour la région AWS US.

Pour plus d'informations concernant la configuration du SSO pour utiliser Talend Cloud, consultez Guide de configuration du Single Sign-On (SSO) de Talend Cloud.
Nouvelle architecture des logs de tâches L'architecture de log des tâches a été repensée pour améliorer l'expérience relative aux logs dans Talend Cloud Management Console.
Cette nouvelle conception consiste en :
  • une nouvelle page de gestion des logs,
  • Une version plus stable du moteur distant avec de meilleures performances
  • de nouveaux endpoints d'API pour automatiser la gestion des logs.
Consultez les informations suivantes et la section spécifique au moteur distant pour plus d'informations.
Nouvelle page de gestion des logs
Dans la nouvelle page Run Overview (Vue d'ensemble des exécutions), vous pouvez voir :
  • les logs,
  • la conception et les paramètres des tâches,
  • les paramètres d'exécution.
Dans l'onglet Logs, vous pouvez :
  • Voir le chargement des logs.
  • Mettre en pause le chargement, pour lire des logs spécifiques.
  • Télécharger tous les logs ou une partie des logs.

Comme les logs chargent plus rapidement avec le moteur distant 2.11.0, il est recommandé de mettre votre moteur à niveau avec cette version.

Les logs sont à présent exportés au format JSON.

Dans l'onglet Job, vous pouvez voir la conception de la tâche et ses paramètres d'exécution.

Pour accéder à la page Run overview (Vue d'ensemble des exécutions), allez dans l'onglet Operations (Opérations) et cliquez sur une tâche.

Support du niveau de log FATAL

 À partir de la version 2.11.0 du moteur distant, le type d'erreur FATAL est explicitement affiché dans les logs d'exécution de Talend Cloud Management Console.

Même si vous ne pouvez pas appliquer de filtre sur le niveau de log FATAL, l'affichage explicite vous permet d'identifier facilement les erreurs des différents niveaux de sévérité.

Si vous n'avez pas besoin de cet affichage, modifiez la valeur du paramètre job.log.fatal.level à false dans le fichier Remote_Engine_installation/etc/org.talend.ipaas.rt.jobserver.client.cfg.
Nouvelle colonne pour l'ordonnancement des tâches et plans Vous pouvez à présent consulter le planning des tâches et plans dans la page Tasks and plans (Tâches et plans) : La colonne Trigger a été ajoutée et s'affiche par défaut.

Pour plus d'iinformations concernant l'ordonnancement, cliquez sur l'icône Triggers and plans (Déclenchements et plans.
Nouveau statut des tâches Avant l'exécution ou l'arrêt d'une tâche, son statut est à présent Pending (En attente).
Sauvegarder des logs d'exécution dans un bucket Amazon S3 Cette fonctionnalité est à présent dépréciée. Utilisez les API pour exporter les logs.

Pour plus d'informations concernant les API, consultez https://api.<env>.cloud.talend.com/tmc/swagger/swagger-ui.html.

<env> est le nom de votre région Cloud. Si vous ne connaissez pas votre région, consultez URL et régions de Talend Cloud.
Versions de l'API publique
L'API publique v1.x est dépréciée depuis la version R2020-05 et sera supprimée dans la version de novembre (R2021-11). Lorsque vous migrez vos programmes d'API depuis la v1.x vers la v2.x de l'API publique, vous devez mettre à jour les endpoints suivants :
  • Pour obtenir toutes les tâches, l'endpoint GET a été modifié, passant de 
    /executables
    à
    /executables/tasks
  • Pour obtenir une tâche via son ID, l'endpoint GET a été modifié, passant de
    /executables/{id}
    à
    /executables/tasks/{id}

Prenez en main la dernière version de l'API publique à l'adresse https://api.<your_environment>.cloud.talend.com/tmc/swagger/swagger-ui.html.
Talend Cloud Migration Platform La plateforme Talend Cloud Migration Platform a été mise à niveau en version 3.7.0.
  • Nouvelle page d'inventaire des artefacts (Artifacts Inventory) :
    • Liste tous les artefacts générés dans toutes les instances de Talend Administration Center enregistrées.
    • Pour chaque artefact, vous obtenez la liste de toutes les tâches (et instances de Talend Administration Center) où une version spécifique est utilisée.
    • En plus des informations d'ID de groupe, d'ID d'artefact et de version, vous pouvez également afficher la version du Studio et le numéro de patch utilisé pour le build, ainsi que la branche de leur projet d'origine.
  • Amélioration du support de migration des tâches et plans :
    • Pour la migration des tâches, Talend Cloud Migration Platform vous permet à présent de mieux tirer parti des artefacts existants de Talend Cloud, publiés avec la dernière version du Studio Talend (version 7.3 actuelle) au lieu d'utiliser leur contrepartie Talend Administration Center.
    • Support amélioré des paramètres écrasés des tâches de Talend Administration Center.

API

De nouvelles API sont ajoutées pour automatiser la gestion des logs des exécutions de tâches dans Talend Cloud Management Console.

Vous pouvez récupérer les logs d'exécuion d'une tâche pour un monitoring en temps réel ou les récupérer de manière périodique pour analyse complète.
Endpoints d'API de logs clients
Méthode Endpoint Description Paramètres de requête
GET /executions/{runId}/logs Récupère les logs d'une exécution de tâche donnée.
  • startTime : date et heure les plus anciennes des logs à récupérer. Par exemple : 2021-06-14T07:01:45Z. Par défaut, les logs sont récupérés à partir de l'heure d'exécution.
  • endTime : date et heure les plus récentes des logs à récupérer. Par exemple : 2021-06-14T15:04:45Z. Par défaut, l'heure actuelle est utilisée.
  • count : nombre d'entrées de logs à retourner. La valeur par défaut est 50. La valeur maximale est 200.
  • order : ordre de tri des horodatages des logs retournés. La valeur par défaut est DESC, ce qui signifie que les logs les plus récents sont les premiers.
  • startIndex : position de départ de pagination des logs, supérieure ou égale à 0

Ces paramètres sont facultatifs.
POST /executions/{runId}/logs Génère le log complet d'une exécution de tâche donnée et retourne un jeton de téléchargement dans ce log.

Ce jeton est valide durant une heure.
  • startTime : date et heure les plus anciennes des logs à placer dans le log généré. Par exemple : 2021-06-14T07:01:45Z. Par défaut, les logs sont récupérés à partir de l'heure d'exécution.
  • endTime : date et heure les plus récentes des logs à placer dans le log généré. Par exemple : 2021-06-14T15:04:45Z. Par défaut, l'heure actuelle est utilisée.
POST /executions/{runId}/logs/status Vérifie le statut du log généré et retourne une URL de téléchargement.

Placez le jeton de téléchargement dans le corps.

 -
Accédez à ces endpoints via https://api.talend.com/apis/execution-logs/2021-03/. Vous pouvez voir une liste d'URL correspondant à chaque centre de données dans URL et régions de Talend Cloud.

Pour des cas d'utilisation documentés de ces API, consultez Monitoring tasks (en anglais).

Correction des bugs

Certaines corrections sont liées à des problèmes internes, non visibles pour les utilisateurs et utilisatrices en dehors de Talend.

Problème Description
TDOPS-1011 Exécution impossible d'une tâche à cause d'un paramètre de ressource manquant
TMC-17830 Les versions disponibles de l'artefact varient selon la version du Studio Talend
TMC-24747 Le type d'erreur FATAL est à présent affiché dans les logs d'exécution
TMC-25059 La tâche a toujours le statut Running (En cours d'exécution) lorsque les logs indiquent que la tâche a été exécutée
TPOPS-2230

Mise à niveau d'Eclipse Jetty DoS en 9.4.43.v20210629
TPOPS-2264 Les noms des moteurs distants d'un cluster ne sont pas affichés
TPOPS-2276

Le paramètre de contexte n'est pas pris en compte dans l'endpoint /executions de l'API POST.
TPOPS-2288 L'exécution d'un plan continue lorsqu'une tâche ne peut démarrer
TPOPS-2343

Les horodatages ont un format incorrect lors de l'utilisation de l'API pour exécuter les plans
TPOPS-2381 La stratégie de déploiement (Deployment Strategy) est incorrecte dans l'API TMC
TPOPS-2465 Aucun log ne s'affiche dans la page Run overview (Vue d'ensemble des exécutions)

Problèmes connus : https://jira.talendforge.org/issues/?filter=28553

Prenez Talend Cloud Management Console en main depuis cette page.