Talend 作业支持的 Big Data Platform 发行版 - 7.1

Talend Data Fabric 安装指南 (Linux)

EnrichVersion
7.1
EnrichProdName
Talend Data Fabric
task
数据治理
EnrichPlatform
Talend Activity Monitoring Console
Talend Administration Center
Talend Artifact Repository
Talend CommandLine
Talend Data Preparation
Talend Data Stewardship
Talend DQ Portal
Talend ESB
Talend Identity and Access Management
Talend Installer
Talend JobServer
Talend Log Server
Talend MDM Server
Talend MDM Web UI
Talend Repository Manager
Talend Runtime
Talend SAP RFC Server
Talend Studio

一般情况下,Talend 对给定 Big Data (Hadoop) 发行版供应商的特定发布版本进行认证。这些通常是针对该供应商的建议使用版本。对于给定供应商的增量升级和服务包,Talend 依赖供应商的兼容性声明来确保 Talend 软件的正确运行和执行。在声明了兼容性的场合,Talend 还依据我们的支持 SLA 来支持该版本。如果某个不兼容性问题应由 Hadoop 供应商验证,则 Talend 认为可能有必要进行重新测试和升级。

如果对您想要使用的 Hadoop 发行版的支持在您的 Talend Studio 中尚不可用,也许可以通过更新获得。有关相关信息,请参阅 Talend Help Center

如果您使用的是 Cloudera 或 Hortonworks 发行版,还可以通过 Studio 中的某些动态发行版设置添加您的发行版。更多详细信息,请参阅动态添加最新 Big Data Platform以这种方式添加的动态发行版一般是您的发行版的 Talend 认证主要发布版的次要版本。Talend 依赖发行版供应商的兼容性声明来确保 Studio 与这些次要版本的兼容性,并通过此措施为可在这些次要版本以及 Talend 认证版本上产生的用例提供官方支持。
  • HDP 3.x 和 CDH 6.x 的动态发行版在技术预览中。

  • 在发行版的版本列表中,某些版本带有 Builtin (内置) 标签。这些版本是通过动态发行版机制由 Talend 添加并在发布 Studio 时随 Studio 交付的。它们经过 Talend 认证,因此受官方支持并且可以立即使用。

Hadoop 发行版

  • :受官方支持。
  • :不受官方支持。
  • :Kerberos kinit 选项受 Studio 支持。
  • :Kerberos kinit 选项和 Kerberos keytab 选项均受 Studio 支持。

1.这可以实现 Studio 与在 Studio 中尚不受官方支持的自定义 Hadoop 发行版之间的连接。有关更多信息,请参阅《Talend Big Data 入门指南》中描述如何连接到自定义 Hadoop 发行版的章节,或任何创建到 Hadoop 发行版的连接的相关组件 (如 tHDFSConnection) 的文档。

2.对于此 MapR 版本,MapR 安全票据机制受 Studio 支持。

3.在 MapR 6 中,HBase 支持已取消以便支持 MapR-DB。有关更多信息,请参阅https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html

4.tAmazonEMRManage 组件支持的 Amazon EMR 版本为 4.0.0、4.1.0、4.2.0、4.5.0、4.6.0、4.9.2 和 5.11.0。

5.受官方支持的 Cloudera 版本。其他 Cloudera 版本可能作为 Cloudera 向后兼容性的一部分在 Cloudera V5.X 分支上兼容。

6.Qubole 中的 HDFS 是短暂的,因此通常用于在将数据传输到诸如 S3 等持久存储系统之前临时存储中间数据。虽然针对 Apache Spark 的 Talend 作业可以在此 HDFS 系统中写入数据,但是 tHDFSConfiguration 不支持它。

7.此 Cloud Big Data Platform 在 Repository (存储库)Metadata (元数据) 向导中不可用,仅可在组件中获得支持。

8.Profiling 透视图不支持 Hive 发行版上的嵌入式连接模式。此模式主要由 Hadoop 开发人员用于测试目的。Studio 可能无法使用嵌入式模式正确运行。

表 1. 定期发行版
  HBase HCatalog HDFS Hive 8 Oozie Pig Spark Sqoop Talend MapReduce
独立 YARN
HDP V2.4.0

V1.6

V2.5.0

V1.6

V2.6.0

V1.6 和 V2.1

Cloudera CDH 5.5 (YARN 模式)

V1.5 V1.5

CDH 5.6 (YARN 模式)

V1.5 V1.5

CDH 5.7 (YARN 模式)

V1.6 V1.6

CDH 5.8 (YARN 模式)

V1.6 V1.6 和 V2.0

CDH 5.10 (YARN 模式)

V1.6 和 V2.1 V1.6 和 V2.1

CDH 5.12.1 (YARN 模式)

V2.2 V2.2

CDH 5.13.0

V2.2 V2.2

MapR 5.0.0 (YARN 模式) 2

V1.3 V1.3

5.1.0 (YARN 模式) 2

V1.5 V1.5

5.2.0 (YARN 模式) 2

V1.6 V1.6

6.0.0 (YARN 模式) 2 3

V2.1 V2.1

6.0.1/MEP 5.0 (YARN 模式) 2 3

V2.2 V2.2

Amazon EMR 4 EMR 4.5.0 (Apache 2.7.2)

V1.6
EMR 4.6.0 (Apache 2.7.2)

V1.6
EMR 5.0.0 (Apache 2.7.2)

V2.0
EMR 5.5.0 (Apache 2.7.3)

V2.1
EMR 5.8.0 (Apache 2.7.3)

V2.2
EMR 5.15.0 (Hadoop 2.8.3)