Cloud Hadoopディストリビューション
Talendがビッグデータでサポートしているクラウドプラットフォームは以下のとおりです。ビッグデータのサポート情報を確認する場合は、クラウドプラットフォームをクリックしてください。
サポート対象のBig Dataプラットフォームのうち、古くなった各バージョンはベンダーによってサポートから外されます。Talendは、ベンダーが設定したサポート終了日を過ぎたバージョンのサポートを中止します。
ベンダーがTalend製品でのサポートを中止するバージョンを引き続き使用できるよう、Talendとそのコミュニティによって便利なツールが提供されます。この理由から、該当するバージョンも次のテーブルに記載されており、製品でも利用可能ですが、Talendはそのようなバージョンに対するサポートの提供を中止しています。
Talendは、次のテーブルにあるプラットフォームバージョンのマイナーバージョンをサポートしています。
| Amazon EMRのバージョン | サポートされているフレームワーク | Spark BatchでサポートされているHadoopエレメント | Spark StreamingでサポートされているHadoopエレメント | StandardでサポートされているHadoopエレメント |
|---|---|---|---|---|
| v5.29.0 (Hadoop 2.8.5) |
標準 Spark v2.4 |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
| v6.2.0 (Hadoop 3.2.1) |
Standard Spark v3.0 |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive |
HBase HDFS HCatalog Hive Sqoop |
tAmazonEMRManageコンポーネントでサポートされているAmazon EMRのバージョンは5.29.0です。
| AWS版Databricksのバージョン | サポートされているフレームワーク | Spark Batchでサポートされているエレメント | Spark Streamingでサポートされているエレメント | Standardでサポートされているエレメント |
|---|---|---|---|---|
| 5.5 LTS | Standard Spark v2.4 |
Hive S3 DynamoDB Snowflake MongoDB TDMコンポーネント(テクニカルレビュー) tDataprepRun |
Hive S3 DynamoDB Kinesis Snowflake MongoDB TDMコンポーネント(テクニカルレビュー) tDataprepRun |
DBFS |
| 6.4 | 標準 Spark v2.4.5 |
Azure Blob Storage ADLS Gen2 Snowflake DeltaLake |
Azure Blob Storage ADLS Gen2 |
DBFS |
| 7.3 LTS | Standard Spark v3.0.1 |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen2 Azure Blob Storage |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen2 Kinesis Azure Blob Storage |
DBFS |
| Azure版Databricksのバージョン | サポートされているフレームワーク | Spark Batchでサポートされているエレメント | Spark Streamingでサポートされているエレメント | Standardでサポートされているエレメント |
|---|---|---|---|---|
| 5.5 LTS | Standard Spark v2.4 |
Hive Azure Blob Storage ADLS Gen1 ADLS Gen2 Snowflake DeltaLake MongoDB TDMコンポーネント(テクニカルレビュー) tDataprepRun |
Hive Azure Blob Storage ADLS Gen1 ADLS Gen2 Snowflake DeltaLake MongoDB TDMコンポーネント(テクニカルレビュー) tDataprepRun |
DBFS |
| 6.4 | 標準 Spark v2.4.5 |
Azure Blob Storage ADLS Gen2 Snowflake DeltaLake |
Azure Blob Storage ADLS Gen2 |
DBFS |
| 7.3 LTS | Standard Spark v3.0.1 |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen1 ADLS Gen2 Azure Blob Storage |
Hive S3 DynamoDB Snowflake MongoDB DeltaLake ADLS Gen1 ADLS Gen2 Azure Blob Storage |
DBFS |
| Microsoft HD Insightのバージョン | サポートされているフレームワーク | Spark Batchでサポートされているエレメント | Spark Streamingでサポートされているエレメント | Standardでサポートされているエレメント |
|---|---|---|---|---|
| 4.0 | Spark v2.4 | ADLS Gen2 Azure Blob Storage Hive |
ADLS Gen2 Azure Blob Storage Hive |
ADLS Gen2 Azure Blob Storage Hive |