Ponts Talend Data Catalog - 7.3

Talend Data Catalog - Notes de version

EnrichVersion
7.3
EnrichProdName
Talend Big Data Platform
Talend Data Fabric
Talend Data Management Platform
Talend Data Services Platform
Talend MDM Platform
Talend Real-Time Big Data Platform
EnrichPlatform
Talend Data Catalog
task
Gouvernance de données
Release Notes

Nouvelles fonctionnalités et améliorations

Fonctionnalité Description
Amazon Web Services (AWS) Athena Database (via JDBC) : nouveau pont d'import Le pont d'import Amazon Web Services (AWS) Base de données Athena (via JDBC) a été ajouté.
Talend Data Integration : support des modèles d'échantillonnage de métadonnées hiérarchiques Le processeur hiérarchique a été utilisé pour les composants XML, tels que le tFileInputXml, le tExtractXMLField, le tWriteXMLField, le tXMLMap et le tFileOutputXML. Correction des composants tFileInputRaw et tFileOutputRaw dans le profil.

Le processeur hiérarchique a été utilisé pour les composants JSON, tels que le tFileInputJSON, le tExtractJSONField, le tWriteJSONField et le tFileOutputJSON.

Base de données IBM DB2 iSeries (AS/400) (via JDBC) : amélioration du profiling et de l'échantillonnage de données Amélioration du parser du modèle de requête pour les échantillons de données a été amélioré et refactorisation du code pour supporter l'approche du modèle de requête.
Apache Spark (avec Python ou Scala) : aucun lignage depuis des tables Teradata vers des fichiers GCP implémentant des tables Hadoop Hive externes dans Google Cloud Platform Ajout du support des classes Map. Amélioration du support de la classe DataFrameReader via la méthode options pour définir les attributs de la connectivité du datastore.
Paramètre miscellaneous (divers) des ponts : remplacement de -c et -cd par -connection.cast, .rename, .merge, .split Ajout des options connection.cast, .merge, .map, .split et .rename.
Paramètre divers : plusieurs instances de la même option au lieu d'une option avec une liste de valeurs Amélioration de la classe MiscParam helper pour fonctionner avec des paramètres contenant plusieurs clés.
QlikSense : Expression Syntax not recognized (Syntaxe de l'expression non reconnue) Améioration du parsage de l'expression.
Ponts d'import SAP BusinessObjects : problème de licence pour la session Amélioration de la gestion des erreurs pour le pont d'import SAP BusinessObjects Web Intelligence. Amélioration du nettoyage de session pour le pont d'import SAP BusinessObjects Information Design Tool.
Base de données Snowflake (via JDBC) : objet source manquant dans le lignage Amélioration du lignage pour les requêtes SQL contenant des références sur des données semi-structurées, par exemple JSON.
Ponts d'import de base de données Hadoop Hive (HCatalog et Metastore via JDBC) : support des chaînes de caractères et fichiers pour le sous-ejeu de schéma Amélioration du paramètre de schéma pour fournir un fichier de paramètre.
Talend Data Integration : support du composant tS3Copy Ajout du support du composant tS3Copy.
Talend Data Integration : support du composant tRedshiftBulkExec Ajout du support du composant tRedShiftBulkExec pour les types de sources S3/EMR.
Base de données Apache Hadoop Hive (HCatalog et Metastore via JDC) : ajout du support des sauvegardes des multi-modèles Ajout du support de sauvegarde des multi-modèles avec l'option -backup pour le paramètre divers.
Apache Spark (avec Python ou Scala) : nouvelle option d'import -prescript Ajout de l'option d'import -prescript au paramètre divers.
Ponts d'export DDL de base de données : nouveau pont d'export de base de données Oracle MySQL SQL DDL Script Ajout du pont d'export de base de données Oracle MySQL SQL DDL Script
IBM Infosphere Data Architect (IDA) : les hiérarchies avec une association de moins d'un niveau sont ignorées Les hiérarchies n'ayant pas au moins une association d'un niveau hiérarchique sont à présent ignorées lors de l'import du modèle.
Sparx Enterprise Architect (UML 2.x XMI) : support des clés primaires et des valeurs nulles Ajout du support des clés primaires et des valeurs nulles.
Panneau Aide du pont : Harmonisation et nettoyage Le contenu du panneau Aide dans le panneau de configuration d'import de pont a été réorganisé et mis à jour.
Import de mappings via le format des métadonnées Excel : la description n'est pas importée Une propriété Script.Description a été ajoutée au profil pour importer la description d'un mapping.
MicroStrategy : ajout de la possibilité d'exclure les dossiers au sein d'un projet Ajout de l'option -folders.exclude à la documentation du paramètre miscellaneous (divers).
Microsoft Azure Blob Storage et Data Lake Storage : ajout de la limite de temps pour parcourir pour le référentiel tiers Implémentation de la validation de format et de l'existence du chemin du paramètre Root directory pour les actions Test et Import.

Implémentation du code commun pour limiter le temps de navigation à 30 secondes.

Microsoft Azure Power BI Service (Repository) : avertissements et erreurs Null Pointer Exception Le support des sources de données ODBC et locales a été amélioré.

Le paramètre storeType a été précédemment configuré pour éviter les avertissements pour les modèles DataSet.

Le schéma vide a été supprimé s'il n'y a aucune table en dessous.

Messages de log de base de données Oracle (via JDBC) : 14K of "MBI_JDBC4_W0243 Trigger Classifier '%' was not found in Schema" Les messages de log relatifs au déclenchement ont été supprimés pour les versions avec un et plusieurs modèles.
Talend Data Integration/composant tDBRow : support de la requête COPY L'appel supplémentaire de fonction a été géré dans le paramètre de contexte.
Talend Data Preparation : erreur "Lineage can be incorrect" Le support de l'action ExtractEmailParts a été ajouté.
ponts HDFS, Hive, Navigator : Support de Cloudera Data Platform 7.1 CDP 7.1 est à présent supportée.
Microsoft SSIS (Base de données de référentiel) : la documentation du paramètre User bridge a été améliorée La documentation du paramètre User bridge a été améliorée pour spécifier les autorisations requises de la base de données.

Corrections notables

Problème Description
Microsoft SQL Server (via JDBC) : erreur "java.lang.StackOverflowError" lors de la requête d'échantillonnage de données pour un grand nombre de colonnes. Correction de la gestion des grandes listes d'objets dans l'option de profiling de données..
Base de données Oracle : MITI.MIRException: The Model is not consistent (le modèle n'est pas cohérent) Correction du traitement de l'ID de procédure Oracle.
Microsoft SQL Server (via JDBC) : MITI.MIRException: There already exists a COLUMN with the name <> in the parent TYPE <> (Une colonne du nom <> existe déjà dans le type PARENT) Correction des types et noms de tables et vues personnalisées.
Pont du système de fichiers : Nouveau paramètre de chiffrement pour Shift_JIS Ajout du paramètre d'énumération de chiffrement pour les fichiers délimités et à taille fixe. Ajout du paramètre divers -file.encoding.
SAS Data Integration : Erreur NullPointer avec les packages SAS SPK Correction du filtre avec une colonne orpheline dans la fonction de jointure croisée.
Base de données Snowflake (via JDBC) : correction du parseur d'expressions Correction des colonnes spécifiées comme $1.
Talend Data Integration : La connexion du tSAPTableInput est manquante après la collecte Correction du filtre du tSAPTableInput.
Paramètre divers : ajout du support de l'option -cache.clear pour les ponts d'import Ajout du support pour l'option -cache.clear.
Dashboard QlikView : Problème lors de la collecte des connexions aux bases de données Ajout de la fonctionnalité de sauvegarde pour Qlikview.
SAP Business Suite 4 HANA (S/4HANA), ECC : java.lang.NullPointerException : Impossible d'importer avec succès Correction du problème de tables D010TAB_TABLES ayant des enregistrements en doublon.

Amélioration du profil de pont grâce à l'amélioration du module de fonction ABAP afin de minimiser les avertissements et grâce à la correction de l'exception et du problème de double téléchargement.

Vous devez appliquer le module de fonction ABAP mis à jour sur le serveur SAP.

Vous devez configurer le pont et le serveur d'application de Talend Data Catalog avec 15 à 20 Go de mémoire.

Talend Data Integration : aucun lignage avec une connexion à une base de données Amazon Aurora MySQL Ajout du support de l'instruction LOAD DATA dans les analyses d'expression MySQL.
Paramètre miscellaneous (divers) des ponts : Correction de l'option -backup pour les bases de données MySQL (via JDBC) Ajout des valeurs creationDate et modificationDate à l'option de sauvegarde et ajout d'un ordre pour les sauvegardes des schémas.
Paramètre miscellaneous (divers) des ponts : Correction de l'option -backup pour les bases de données JDBC Ajout de la valeur isInheritsLineageOptions à l'option de sauvegarde.

Ajout du support des sauvegardes multi-modèles.

QlikSense Server : impossible de parser les expressions dans les extensions de visualisation Suppression de la partie JSON du titre et ajout des expressions de parsing dans le titre.
Amazon Athena/Base de données (via JDBC) : des vues sont manquantes lors du scan Amélioration du modèle de traitement de requête afin de contrôler la structure du jeu de résultats.
Base de données IBM Informix (via JDBC) : erreur java.sql.SQLException: Unable to find User Defined Routine with the given ID Le comportement du pont a été modifié pour terminer l'import même si ce type d'erreur survient.
Pont d'import de base de données Hadoop Hive (HCatalog et Metastore via JDBC) : Cloudera Data Platform 7.1/des colonnes ne sont pas extraites Amélioration du pont pour supporter le nouveau comportement des noms de colonnes Hive.
Parsing SQL des expressions de transformation pour les ponts d'import : limitations sur les extensions de la base de données Oracle Les limitations des extensions d'Oracle sont les suivantes :
  • Le type de texte Oracle literals est supporté et limité aux deux types de guillemets suivants : 'Jackie''s raincoat'.
  • L'alternative Q/qalternative Q<'Jackie's raincoat>' n'est pas supportée.
Base de données Oracle (via JDBC) : échec de la connexion de test avec ORA-12505 Ajout de messages et commentaires de débogage et amélioration de la gestion des exceptions.
Base de données Snowflake SQL DML (DI/ETL) Script (SnowSQL) : lignage table vers table Correction des étoiles dans les requêtes avec CTE et les alias. Ajout du support de la fonction DATEDIFF.
Bases de données Oracle et Microsoft SQL Server (via JDBC) : les valeurs nulles de bases de données sont déduites comme valeurs de caractères nulles lors de l'exécution du profiling de la base de données Mise à jour du code du pont à passer à la bibliothèque de profiling de données, comme chaîne de caractères vides ou comme valeur Java nulle.
Oracle Business Intelligence (OBI) Enterprise Edition (Server) : repository subset browse is failing (échec de navigation du sous-ensemble du référentiel) Amélioration du code lié à la détection des chemins en doublon.
Base de données Oracle (via JDBC) : échoue avec plusieurs IllegalArgumentExceptions Correction de la requête de schéma Oracle.
Informatica PowerCenter erreur StackOverflowError La résolution du paramètre récursif a été corrigée.
Microsoft Power BI Report Server (Repository) : connexion impossible si la requête contient une variable/ un paramètre La détection des types de bases de données a été améliorée.