Versions des distributions de plateformes Cloud Big Data supportées pour les Jobs Talend
Distributions Cloud Hadoop
Talend supporte les plateformes Cloud suivantes pour le Big Data. Cliquez sur votre plateforme Cloud pour consulter les informations relatives au support du Big Data.
- Amazon EMR (uniquement en anglais)
- Cloudera sur AWS (uniquement en anglais)
- Cloudera sur Azure (uniquement en anglais)
- Databricks sur AWS (uniquement en anglais)
- Databricks sur Azure (uniquement en anglais)
- Google Dataproc (uniquement en anglais)
- Microsoft HDInsight (uniquement en anglais)
- Qubole sur AWS (uniquement en anglais)
Les anciennes versions des plateformes Big Data supportées ne sont plus supportées par leurs vendeurs. Talend ne supporte plus une version une fois que celle-ci atteint sa date de fin de support prévue par le vendeur.
Talend et sa communauté vous fournissent la possibilité de continuer à utiliser une version qu'un vendeur ne supporte plus, dans les produits Talend. Ainsi, cette version peut être listée dans les tables suivantes et disponible dans les produits, mais Talend ne fournit plus de support pour cette version.
Talend supporte les versions mineures des versions des plateformes listées dans les tableaux suivants.
| Version d'Amazon EMR | Frameworks supportés | Éléments Hadoop supportés dans Spark Batch | Éléments Hadoop supportés dans Spark Streaming |
Éléments Hadoop supportés dans Standard |
|---|---|---|---|---|
| v4.5.0 (Hadoop 2.7.2) |
Standard Spark v1.6 (dépréciée) |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| v4.6.0 (Hadoop 2.7.2) |
Standard Spark v1.6 (dépréciée) |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| v5.0.0 (Hadoop 2.7.2) |
Standard Spark v2.0 (dépréciée) |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| v5.5.0 (Hadoop 2.7.3) |
Standard Spark v2.1 (dépréciée) |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| v5.8.0 (Hadoop 2.7.3) |
Standard Spark v2.2 (dépréciée) |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| EMR 5.15.0 (Hadoop 2.8.3) |
Standard Spark v2.3 (dépréciée) |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| v5.29.0 (Hadoop 2.8.5) |
Standard Spark v2.4 |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| v6.2.0 (Hadoop 3.2.1) |
Standard Spark v3.0 |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.5.0, 4.6.0, 4.9.2, 5.11.0, 5.15.0 et 5.29.0.
| Version de Cloudera | Frameworks supportés | Éléments supportés dans Spark Batch | Éléments supportés dans Spark Streaming |
Éléments supportés dans Standard |
|---|---|---|---|---|
| CDH5.11 (dépréciée) | Spark v2.1 (dépréciée) | S3 Redshift DynamoDB |
S3 Kinesis Redshift DynamoDB |
| Version de Cloudera | Frameworks supportés | Éléments supportés dans Spark Batch | Éléments supportés dans Spark Streaming |
Éléments supportés dans Standard |
|---|---|---|---|---|
| CDH5.11 (dépréciée) | Spark v2.1 (dépréciée) | ADLS Gen1 Stockage Blob Azure HDFS |
ADLS Gen1 Stockage Blob Azure HDFS |
| Version de Databricks sur AWS | Frameworks supportés | Éléments supportés dans Spark Batch | Éléments supportés dans Spark Streaming |
Éléments supportés dans Standard |
|---|---|---|---|---|
| 3.5 LTS (dépréciée) | Standard Spark v2.2 (dépréciée) |
Hive S3 DynamoDB |
Hive S3 DynamoDB Kinesis |
DBFS |
| 5.5 LTS | Standard Spark v2.4 |
Hive S3 DynamoDB Snowflake MongoDB Composants TDM en version bêta tDataprepRun |
Hive S3 DynamoDB Kinesis Snowflake MongoDB Composants TDM en version bêta tDataprepRun |
DBFS |
| 6.4 | Standard Spark v2.4.5 |
Stockage Blob Azure ADLS Gen2 Snowflake DeltaLake |
Stockage Blob Azure ADLS Gen2 |
DBFS |
| 7.3 LTS | Standard Spark v3.0.1 |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen2 Stockage Blob Azure |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen2 Kinesis Stockage Blob Azure |
DBFS |
| Version de Databricks sur Azure | Frameworks supportés | Éléments supportés dans Spark Batch | Éléments supportés dans Spark Streaming |
Éléments supportés dans Standard |
|---|---|---|---|---|
| 3.5 LTS (dépréciée) | Standard Spark v2.2 (dépréciée) |
Hive Stockage Blob Azure ADLS Gen1 |
Hive Stockage Blob Azure ADLS Gen1 |
DBFS |
| 5.5 LTS | Standard Spark v2.4 |
Hive Stockage Blob Azure ADLS Gen1 ADLS Gen2 Snowflake DeltaLake MongoDB Composants TDM en version bêta tDataprepRun |
Hive Stockage Blob Azure ADLS Gen1 ADLS Gen2 Snowflake DeltaLake MongoDB Composants TDM en version bêta tDataprepRun |
DBFS |
| 6.4 | Standard Spark v2.4.5 |
Stockage Blob Azure ADLS Gen2 Snowflake DeltaLake |
Stockage Blob Azure ADLS Gen2 |
DBFS |
| 7.3 LTS | Standard Spark v3.0.1 |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen1 ADLS Gen2 Stockage Blob Azure |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen1 ADLS Gen2 Stockage Blob Azure |
DBFS |
| Version Google Dataproc | Frameworks supportés | Éléments supportés dans Spark Batch | Éléments supportés dans Spark Streaming |
Éléments supportés dans Standard |
|---|---|---|---|---|
| v1.1 (dépréciée) | Standard Spark v2.0 (dépréciée) |
Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON |
Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON Google PubSub |
Hive |
| v1.4 (dépréciée) | Standard Spark v2.4 |
Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON |
Hive BigQuery Google Storage Avro Délimité Parquet Positionnel XML JSON Google PubSub |
Hive |
| Version de Microsoft HDInsight | Frameworks supportés | Éléments supportés dans Spark Batch | Éléments supportés dans Spark Streaming |
Éléments supportés dans Standard |
|---|---|---|---|---|
| 3.4 (dépréciée) | Spark v1.6 (dépréciée) | Hive | Hive | - |
| 3.6 (dépréciée) | Spark v2.1 (dépréciée) | Hive | Hive | - |
| 4.0 | Spark v2.3 (dépréciée) et v2.4 | ADLS Gen2 Stockage Blob Azure Hive |
ADLS Gen2 Stockage Blob Azure Hive |
ADLS Gen2 Stockage Blob Azure Hive |
| Version de Qubole | Frameworks supportés | Éléments supportés dans Spark Batch | Éléments supportés dans Spark Streaming |
Éléments supportés dans Standard |
|---|---|---|---|---|
| Qubole Spark 2 (dépréciée) | Standard Spark v2.2 (dépréciée) |
Redshift S3 DynamoDB |
Redshift S3 DynamoDB Kinesis |
S3 Hive |
Cette page vous a-t-elle aidé ?
Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – dites-nous comment nous améliorer !