Neuheiten in R2022-04 - Cloud - 8.0

Talend - Versionshinweise

Version
Cloud
8.0
Language
Deutsch
Product
Talend Big Data
Talend Big Data Platform
Talend Cloud API Services Platform
Talend Cloud Big Data
Talend Cloud Big Data Platform
Talend Cloud Data Integration
Talend Cloud Data Management Platform
Talend Cloud Real-Time Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Real-Time Big Data Platform
Module
Talend Cloud API Designer
Talend Cloud API Tester
Talend Cloud Data Inventory
Talend Cloud Data Preparation
Talend Cloud Data Stewardship
Talend Cloud Pipeline Designer
Talend Data Preparation
Talend Data Stewardship
Talend Management Console
Talend Studio
Content
Installation und Upgrade
Versionshinweise
Last publication date
2024-03-28

Big Data: Neue Funktionen

Funktion

Beschreibung

Verfügbar in

Unterstützung für die Cloudera Data Engineer Experience mit AWS und Spark Universal 3.1.x Sie können Ihre Spark-Jobs jetzt mit einer Cloudera Data Engineer Experience unter Rückgriff auf Spark Universal mit Spark 3.1.x ausführen. Die entsprechende Konfiguration können Sie in der Ansicht Spark Configuration (Spark-Konfiguration) Ihrer Spark-Jobs vornehmen.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für Databricks Runtime 8.x bis 9.x mit Job-Clustern unter Verwendung von Spark Universal 3.1.x Sie können Ihre Spark-Jobs jetzt in einem Databricks-Job-Cluster unter Rückgriff auf Spark Universal mit Spark 3.1.x ausführen. Die Konfiguration erfolgt entweder in der Ansicht Spark Configuration (Spark-Konfiguration) Ihrer Spark-Jobs oder im Metadaten-Assistenten Hadoop Cluster Connection (Hadoop-Clusterverbindung).

Wenn Sie diesen Modus auswählen, ist Talend Studio mit den Databricks-Versionen 8.x bis 9.x kompatibel.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für Spark Universal 3.2.x im lokalen Modus Sie können Ihre Spark-Jobs jetzt unter Rückgriff auf Spark Universal mit Spark 3.2.x im lokalen Modus (Local) ausführen. Die Konfiguration erfolgt entweder in der Ansicht Spark Configuration (Spark-Konfiguration) Ihrer Spark-Jobs oder im Metadaten-Assistenten Hadoop Cluster Connection (Hadoop-Clusterverbindung).

Wenn Sie diesen Modus auswählen, generiert Talend Studio zur Laufzeit intern die Spark-Umgebung, damit der Job lokal innerhalb von Talend Studio ausgeführt werden kann.

Big Data-Komponenten von Talend Data Mapper (tHConvertFile, tHMapFile, tHMapInput und tHMapRecord) sind im Augenblick nicht kompatibel mit Spark 3.2.x.

Da es sich nur um eine Betafunktion handelt, ist dies nicht für die Produktionsumgebung geeignet.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für Google Dataproc 2.0.x mit Spark Universal 3.1.x Sie können Ihre Spark-Jobs jetzt in einem Google Dataproc-Cluster unter Rückgriff auf Spark Universal mit Spark 3.1.x ausführen. Die entsprechende Konfiguration können Sie in der Ansicht Spark Configuration (Spark-Konfiguration) Ihrer Spark-Jobs vornehmen.

Wenn Sie diesen Modus auswählen, ist Talend Studio mit der Version Dataproc 2.0.x nur für Spark Batch- und Spark Streaming-Jobs kompatibel. Standard-Jobs mit Hive-Komponenten werden im Augenblick nicht unterstützt.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für mehrere tGSConfiguration-Komponenten in Spark-Jobs Sie können jetzt mehrere tGSConfiguration-Komponenten in einem Job einsetzen, um verschiedene Google Storage-Buckets mit unterschiedlichen Anmeldedaten verwenden zu können. Diese Funktion gilt sowohl für Spark Batch- als auch für Spark Streaming-Jobs.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für CDP Public Cloud mit Knox und Impala für Standard-Jobs Wenn Sie CDP Public Cloud zur Ausführung Ihrer Standard-Jobs verwenden, können Sie jetzt sowohl Knox als auch Impala nutzen.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für die AWS EMR-Distributionen 6.3.x, 6.4.x und 6.5.x mit Spark Universal 3.1.x Sie können Ihre Spark-Jobs jetzt in einem AWS EMR-Cluster unter Rückgriff auf Spark Universal mit Spark 3.1.x im Yarn-Cluster-Modus ausführen. Die Konfiguration erfolgt entweder in der Ansicht Spark Configuration (Spark-Konfiguration) Ihrer Spark-Jobs oder im Metadaten-Assistenten Hadoop Cluster Connection (Hadoop-Clusterverbindung).

Wenn Sie diesen Modus auswählen, ist Talend Studio mit den AWS EMR-Versionen 6.3.x, 6.4.x und 6.5.x kompatibel. Spark-Jobs funktionieren im Augenblick nicht mit der tHiveConnection-Komponente.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für Open Source Apache Spark Standalone-Cluster mit Spark Universal 3.2.x Sie können Ihre Spark-Jobs jetzt unter Rückgriff auf Spark Universal 3.2.x im Standalone-Modus ausführen. Die entsprechende Konfiguration können Sie in der Ansicht Spark Configuration (Spark-Konfiguration) Ihrer Spark-Jobs vornehmen.

Bei der Auswahl dieses Modus stellt Talend Studio eine Verbindung zu einem Spark-fähigen Cluster für die Ausführung des Jobs ausgehend von diesem Cluster her.

  • Da es sich nur um eine Betafunktion handelt, ist dies nicht für die Produktionsumgebung geeignet.
  • Kerberos ist für die Beta-Version noch nicht verfügbar.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Unterstützung für Azure Active Directory (AD) Service Principal für Azure Synapse Spark-Pools in Spark-Jobs

Wenn Sie Azure Synapse Analytics mit Apache Spark-Pools als Distribution für Ihre Spark Batch- und Spark Streaming-Jobs verwenden, können Sie sich jetzt mit Azure AD Service Principal authentifizieren. Die entsprechende Konfiguration können Sie in der Ansicht Spark Configuration (Spark-Konfiguration) Ihrer Spark-Jobs vornehmen.

Da es sich nur um eine Betafunktion handelt, ist dies nicht für die Produktionsumgebung geeignet.

Vorhanden in:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Big Data

Data Integration: Neue Funktionen

Funktion

Beschreibung

Verfügbar in

Talend Studio kann jetzt automatisch Test-Branches für den Test der Migration von dezentralen Projekten erstellen.

Talend Studio stellt jetzt den neuen Assistenten Migrate projects or test (Projekte migrieren oder testen) mit den folgenden zwei Optionen bereit:
  • Migrate (Migrieren): Migriert das Projekt ohne Test.
  • Test: Testet die Projektmigration durch die Erstellung von Test-Branches und die Migration des Projekts in den Test-Branches, um den Produktions-Branch nicht zu gefährden.

Der Assistent wird angezeigt, sobald Sie ein dezentrales Projekt öffnen, dessen Version kleiner ist als die Talend Studio-Version.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio

Neue Komponente für das Schreiben von Daten in ein aktives ADSO über den SAP Java-Konnektor Version 3

Diese Release umfasst die Komponente tSAPADSOOutput, die Ihnen das Schreiben von Daten in ein aktives Advanced Data Store Object (ADSO) über den SAP Java-Konnektor Version 3 ermöglicht.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio

Neue Komponenten zum Auflisten und Löschen von Dateien auf einem Samba-Host

Diese Release stellt die folgenden neuen Komponenten bereit:

  • tSambaList - Listet Dateien in einem Verzeichnis auf einem Samba-Host v2 oder v3 auf und übergibt Informationen zu den Dateien an die nachfolgende Komponente.

  • tSambaDelete - Löscht eine Datei in einem Verzeichnis auf einem Samba-Host v2 oder v3 bzw. das ganze Verzeichnis.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio

Unterstützung für den Microsoft SQL-Server Version 2019

Diese Release bietet Unterstützung für den Microsoft SQL-Server Version 2019, die beim Aufbau einer Verbindung zu einem Microsoft SQL-Server eine Azure Active Directory-Authentifizierung ermöglicht.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio

Unterstützung für den Redshift-Treiber v2.x

Diese Release bietet Unterstützung für den Redshift-Treiber v2.x. Für die folgenden Redshift-Komponenten wurde die Option Driver version (Treiberversion) hinzugefügt: tRedshiftInput, tRedshiftUnload, tRedshiftOutput, tRedshiftConnection, tRedshiftRow, tRedshiftOutputBulkExec, tRedshiftBulkExec.

Die Vorgehensweise zur Angabe der JDBC-Parameter fällt je nach Treiber v1 und Treiber v2 unterschiedlich aus. Detaillierte Informationen finden Sie unter „Standardeigenschaften von tRedshiftConnection“.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio

Unterstützung für ein dynamisches Schema für tSAPTableInput Die Funktion „Dynamic Schema“ (Dynamisches Schema) wird jetzt für tSAPTableInput in Ihren Standard-Jobs mit der Verwendung von tSetDynamicSchema unterstützt. Mit dieser Funktion können Sie ein Schema auf nicht-statische Weise konfigurieren, d. h. Sie müssen Ihren Job bei einer künftigen Schema-Änderung nicht umschreiben und stellen dabei sicher, dass er stets ordnungsgemäß funktioniert. Sie können jetzt Tabellen, Spalten und Joins dynamisch bereitstellen.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio

Data Quality: Neue Funktionen

Funktion

Beschreibung

Verfügbar in

Neue Funktion zur Schlüsselableitung Die Datenschutzkomponenten wurden um die PBKDF2-Funktion zur Schlüsselableitung mit 300.000 Iterationen erweitert. Diese Funktion wird als Standard für neue Jobs verwendet.

Aus Kompatibilitätsgründen mit Jobs vor 8.0 R2022-04 wird nach wie vor PBKDF2 mit 65.536 Iterationen unterstützt, ist jedoch veraltet.

Wählen Sie die Funktion zur Schlüsselableitung in den Advanced settings (Erweiterte Einstellungen) aus.
Die neue Funktion ist verfügbar in:
  • tDataEncrypt
  • tDataDecrypt
  • tDataMasking
  • tDataUnmasking
  • tPatternMasking
  • tPatternUnmasking

Vorhanden in:

Big Data Platform

Cloud API Services Platform

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Management Platform

Data Fabric

Data Management Platform

Data Services Platform

MDM Platform

Real-Time Big Data Platform

Alle Produkte von Talend Platform und Data Fabric

Anwendungsintegration: Neue Funktionen

Funktion

Beschreibung

Verfügbar in

Die Standard-Endpunkte zur Microservice-Überwachung sind jetzt begrenzt auf Info, Gesundheit und Jolokia.

Mit Talend Studio generierte Microservices bieten Zugriff auf Spring Boot Actuator-Endpunkte. Die Standard-Überwachungsendpunkte sind jetzt begrenzt auf Info, Gesundheit und Jolokia.

Vorhanden in:

Cloud API Services Platform

Cloud Data Fabric

Data Fabric

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit ESB

Kontinuierliche Integration (CI = Continuous Integration): Neue Funktionen

Funktion

Beschreibung

Verfügbar in

Talend CI Builder aktualisiert auf Version 8.0.4 Talend CI Builder wurde von der Version 8.0.1 auf die Version 8.0.4 aktualisiert.

Verwenden Sie ab dieser monatlichen Version Talend CI Builder 8.0.4 in Ihren CI-Befehlen (Continuous Integration: Kontinuierliche Integration) oder Pipeline-Skripten bis zur Veröffentlichung einer neuen Version von Talend CI Builder.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio

Neuer Befehl zur Installation von Talend CommandLine in einem eigenständigen CI-Schritt Jetzt ist der neue Befehl mvn org.talend.ci:builder-maven-plugin:8.0.4:install verfügbar, der Ihnen die Installation von Talend CommandLine in einem eigenständigen CI-Schritt zur kontinuierlichen Integration ohne Erstellung eines Projekts oder Generierung von POM-Dateien ermöglicht.

Vorhanden in:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

Alle abonnementbasierte Produkte von Talend mit Talend Studio