Big Data : nouvelles fonctionnalités
|
Fonctionnalité |
Description |
Disponible dans |
|---|---|---|
| Support de l'expérience Cloudera Data Engineering avec AWS on Spark Universal 3.1.x | Vous pouvez à présent exécuter vos Jobs Spark sur Cloudera Data Engineering, à l'aide de Spark Universal avec Spark 3.1.x. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark.
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support de Databricks Runtime 8.x à 9.x avec des clusters de jobs sur Spark Universal 3.1.x | Vous pouvez à présent exécuter vos Jobs Spark sur un cluster de jobs Databricks, à l'aide de Spark Universal avec Spark 3.1.x. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop). Lorsque vous sélectionnez ce mode, le Studio Talend est compatible avec les versions 8.x à 9.x de Databricks. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support de Spark Universal 3.2.x en mode local | Vous pouvez à présent exécuter vos Jobs Spark à l'aide de Spark Universal avec Spark 3.2.x en mode Local. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop). Lorsque vous sélectionnez ce mode, le Studio Talend construit l'environnement Spark en lui-même lors de l'exécution, pour exécuter le Job localement dans le Studio Talend. Les composants Talend Data Mapper Big Data (tHConvertFile, tHMapFile, tHMapInput et tHMapRecord) ne sont pas compatibles avec Spark 3.2.x pour le moment. Comme cette fonctionnalité est disponible en fonctionnalité bêta uniquement, elle ne convient pas à des environnements de production. 
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support de Google Dataproc 2.0.x sur Spark Universal 3.1.x | Vous pouvez à présent exécuter vos Jobs Spark sur un cluster Google Dataproc, à l'aide de Spark Universal avec Spark 3.1.x. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark. Lorsque vous sélectionnez ce mode, le Studio Talend est compatible avec la version 2.0.x de Dataproc uniquement sur les Jobs Spark Batch et Spark Streaming. Les Jobs Standard contenant des composants Hive ne sont pas supportés pour le moment. 
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support de plusieurs composants tGSConfiguration dans les Jobs Spark | Vous pouvez utiliser plusieurs composants tGSConfiguration dans un Job, pour utiliser différents buckets Google Storage avec différents identifiants. Cette fonctionnalité s'applique aux Jobs Spark Batch et Spark Streaming. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support de CDP Public Cloud avec Knox et Impala dans les Jobs Standard | Si vous utilisez CDP Public Cloud pour exécuter vos Jobs Standard, vous pouvez à présent utiliser Knox et Impala. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support des distributions AWS EMR 6.3.x, 6.4.x et 6.5.x avec Spark Universal 3.1.x | Vous pouvez à présent exécuter vos Jobs Spark sur un cluster AWS EMR, à l'aide de Spark Universal avec Spark 3.1.x en mode Yarn cluster. Vous pouvez la configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark ou dans l'assistant de métadonnée Hadoop Cluster Connection (Connexion au cluster Hadoop). Lorsque vous sélectionnez ce mode, le Studio Talend est compatible avec les versions 6.3.x, 6.4.x et 6.5.x de AWS EMR. Les Jobs Spark ne fonctionnent pas avec le composant tHiveConnection pour le moment. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support du cluster standalone Open Source Apache Spark sur Spark Universal 3.2.x | Vous pouvez à présent exécuter vos Jobs Spark en mode Standalone avec Spark Universal 3.2.x. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark. Lorsque vous sélectionnez ce mode, le Studio Talend se connecte à un cluster compatible Spark pour exécuter le Job depuis ce cluster.
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
| Support du Principal de service Azure Active Directory (AD) pour les pools Azure Synapse Spark dans les Jobs Spark |
Lorsque vous utilisez Azure Synapse Analytics avec les pools Apache Spark comme distribution pour vos Jobs Spark Batch et Spark Streaming, vous pouvez à présent vous authentifier avec le Principal de service Azure AD. Vous pouvez le configurer dans la vue Spark Configuration (Configuration de Spark) de vos Jobs Spark. Comme cette fonctionnalité est disponible en fonctionnalité bêta uniquement, elle ne convient pas à des environnements de production. 
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform Tous les produits Talend avec Big Data nécessitant souscription |
Data Integration : nouvelles fonctionnalités
|
Fonctionnalité |
Description |
Disponible dans |
|---|---|---|
|
Le Studio Talend peut à présent créer automatiquement les branches de test pour tester la migration des projets distants |
Le Studio Talend fournit à présent un assistant Migrate projects or test (Migrer les projets ou les tests) avec les deux options suivantes :
L'assistant est affiché lorsque vous ouvrez un projet distant dont la version est inférieure à la version du Studio Talend. 
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |
|
Nouveau composant pour écrire des données dans un ADSO actif via SAP Java Connector version 3 |
Cette version fournit le composant tSAPADSOOutput, qui vous permet d'écrire des données dans un Advanced Data Store Object (ADSO) actif, via SAP Java Connector version 3. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |
|
Nouveaux composants pour respectivement lister et supprimer des fichiers sur un hôte Samba |
Cette version fournit les deux composants suivants.
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |
|
Support de la version 2019 de Microsoft SQL Server |
Cette version fournit le support de Microsoft SQL Server version 2019, ce qui permet d'utiliser l'authentification Azure Active Directory lors de la connexion à une base de données Microsoft SQL Server. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |
|
Support du pilote Redshift v2.x |
Cette version fournit le support du pilote Redshift v2.x. Une option Driver version (Version du pilote) a été ajoutée à ces composnats Redshift : tRedshiftInput, tRedshiftUnload, tRedshiftOutput, tRedshiftConnection, tRedshiftRow, tRedshiftOutputBulkExec, tRedshiftBulkExec. La manière dont vous spécifiez les paramètres JDBC varie entre la version 1 et la version 2 du pilote. Pour plus d'informations, consultez Propriétés du tRedshiftConnection Standard. 
|
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |
| Support du schéma dynamique pour le tSAPTableInput | La fonctionnalité de schéma dynamique est à présent supportée pour le tSAPTableInput dans vos Jobs Standard avec l'utilisation du tSetDynamicSchema. La fonction de schéma dynamique vous permet de configurer un schéma de manière non-statique afin que vous n'ayez pas à concevoir à nouveau votre Job pour les modifications de schéma à venir, tout en garantissant que votre schéma fonctionne à tout moment. Vous pouvez à présent fournir des tables, des colonnes et des jointures de manière dynamique. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |
Data Quality : nouvelles fonctionnalités
|
Fonctionnalité |
Description |
Disponible dans |
|---|---|---|
| Nouvelle fonction de dérivation de clé | Les composants de confidentialité des données ont été améliorés grâce à l'ajout de la fonction de dérivation de clé PBKDF2, avec 300 000 itérations. Cette fonction est celle par défaut et sera utilisée pour les nouveaux Jobs. Pour des raisons de compatibilité avec les Jobs antérieurs à la version 8.0 R2022-04, PBKDF2 avec 65 536 itérations est toujours supporté, mais déprécié. Sélectionnez la fonction de dérivation de clé dans l'onglet Advanced settings (Paramètres avancés).
La nouvelle fonction est disponible dans :
|
ⓘ Disponible dans : Big Data Platform Cloud API Services Platform Cloud Big Data Platform Cloud Data Fabric Cloud Data Management Platform Data Fabric Data Management Platform Data Services Platform MDM Platform Real-Time Big Data Platform Tous les produits Talend Platform et Data Fabric |
Intégration d'applications : nouvelles fonctionnalités
|
Fonctionnalité |
Description |
Disponible dans |
|---|---|---|
|
Les endpoints de monitoring des microservices par défaut sont à présent limités aux informations (info), à la santé (health) et à Jolokia. |
Les microservices construits avec le Studio Talend fournissent l'accès aux endpoints Spring Boot Actuator. Les endpoints de monitoring par défaut sont à présent limités aux informations (info), à la santé (health) et à Jolokia. |
ⓘ Disponible dans : Cloud API Services Platform Cloud Data Fabric Data Fabric Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend avec ESB nécessitant souscription |
Intégration continue : nouvelles fonctionnalités
|
Fonctionnalité |
Description |
Disponible dans |
|---|---|---|
| Le Builder Talend d'intégration continue a été mis à niveau en version 8.0.4 | Le Builder Talend d'intégration continue a été mis à niveau, passant de la version 8.0.1 à la version 8.0.4. Utilisez le Builder Talend d'intégration continue 8.0.4 dans vos commandes d'intégration continue ou dans vos scripts de pipelines, à partir de cette version mensuelle et jusqu'à la sortie d'une nouvelle version du Builder Talend d'intégration continue. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |
| Nouvelle commande d'installation de Talend CommandLine dans une étape d'intégration continue standalone | Une nouvelle commande mvn org.talend.ci:builder-maven-plugin:8.0.4:install est disponible, elle vous permet d'installer Talend CommandLine dans une étape d'intégration continue standalone, sans avoir à créer de projet ou à générer de fichier POM. |
ⓘ Disponible dans : Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform Tous les produits Talend nécessitant souscription avec le Studio Talend |