Big Data : nouvelles fonctionnalités - Cloud - 8.0

Notes de version de Talend

Version
Cloud
8.0
Language
Français
Product
Talend Big Data
Talend Big Data Platform
Talend Cloud API Services Platform
Talend Cloud Big Data
Talend Cloud Big Data Platform
Talend Cloud Data Integration
Talend Cloud Data Management Platform
Talend Cloud Real-Time Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Real-Time Big Data Platform
Module
Studio Talend
Talend Cloud API Designer
Talend Cloud API Tester
Talend Cloud Data Inventory
Talend Cloud Data Preparation
Talend Cloud Data Stewardship
Talend Cloud Pipeline Designer
Talend Data Preparation
Talend Data Stewardship
Talend Management Console
Content
Installation et mise à niveau
Notes de version
Last publication date
2024-03-28

Fonctionnalité

Description

Disponible dans

Support de Spark Universal Vous pouvez à présent exécuter vos Jobs Spark à l'aide de Spark Universal avec Spark 2.4.x ou Spark 3.0.x, soit en mode Local, soit en mode Yarn cluster (Cluster YARN).

Spark Universal est un mécanisme permettant au Studio Talend d'être compatible avec toutes les distributions Big Data disponibles pour une version de Spark donnée, via uniquement un fichier JAR de configuration Hadoop contenant toutes les informations nécessaires à l'établissement d'une connexion au cluster en mode Yarn cluster (Cluster YARN).

Spark Universal renforce l'agilité en proposant de passer d'un mode Spark à l'autre, d'une distribution à l'autre ou d'un environnement à l'autre.

Vous pouvez configurer votre connexion Spark Universal depuis la vue Spark configuration (Configuration de Spark) de votre Job ou depuis l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop), dans l'arborescence du référentiel (Repository) :

Disponible dans :

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Tous les produits Talend avec Big Data nécessitant souscription

Support de Kubernetes avec Spark Universal 3.1.x Vous pouvez à présent exécuter vos Jobs Spark à l'aide de Spark Universal avec Spark 3.1.x, en mode Kubernetes.
Vous pouvez configurer votre connexion Spark Universal avec Kubernetes depuis la vue Spark configuration (Configuration de Spark) de votre Job ou depuis l'assistant de métadonnées Hadoop Cluster Connection (Connexion au cluster Hadoop), dans l'arborescence du référentiel (Repository) :

Disponible dans :

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Tous les produits Talend avec Big Data nécessitant souscription

Support du schéma dynamique dans les composants Spark Batch Vous pouvez à présent utiliser les schémas dynamiques dans vos Jobs Spark avec les composants suivants :
  • tDeltaLakeInput
  • tDeltaLakeOutput
  • tFileInputParquet
  • tFileOutputParquet
  • tJDBCInput
  • tJDBCOutput
  • tLogRow
  • tSqlRow

Disponible dans :

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Tous les produits Talend avec Big Data nécessitant souscription