Distributions communes d'Hadoop
Pour connaître la compatibilité entre les distributions communes d'Hadoop et les plateformes de Big Data supportées par Talend, cliquez sur une plateforme Big Data ci-dessous.
Distribution Hadoop | Version | Fonctionne avec HBase | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | Oui | Oui | |
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | Oui | Oui | |
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | |||
6.0.1 MEP 5.0 (mode YARN) | |||
6.1 / MEP 6.1 | |||
Amazon EMR3 | 4.5.0 (Apache 2.7.2) | ||
4.6.0 (Apache 2.7.2) | Oui | ||
5.0.0 (Apache 2.7.2) | Oui | ||
5.5.0 (Apache 2.7.2) | Oui | ||
5.8.0 (Apache 2.7.2) | Oui | ||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec HCatalog | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | Oui | Oui | |
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | Oui | Oui | |
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | Oui | Oui | |
6.0.1 MEP 5.0 (mode YARN) | Oui | Oui | |
6.1 / MEP 6.1 | Oui | Oui | |
Amazon EMR 3 | 4.5.0 (Apache 2.7.2) | Oui | Oui |
4.6.0 (Apache 2.7.2) | Oui | Oui | |
5.0.0 (Apache 2.7.2) | Oui | Oui | |
5.5.0 (Apache 2.7.2) | Oui | Oui | |
5.8.0 (Apache 2.7.2) | Oui | Oui | |
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec HDFS | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | Oui | Oui | |
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | Oui | Oui | |
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | Oui | Oui | |
6.0.1 MEP 5.0 (mode YARN) | Oui | Oui | |
6.1 / MEP 6.1 | Oui | Oui | |
Amazon EMR 3 | 4.5.0 (Apache 2.7.2) | Oui | |
4.6.0 (Apache 2.7.2) | Oui | ||
5.0.0 (Apache 2.7.2) | Oui | ||
5.5.0 (Apache 2.7.2) | Oui | ||
5.8.0 (Apache 2.7.2) | Oui | ||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec Hive | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | Oui | Oui | |
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | Oui | Oui | |
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | Oui | Oui | |
6.0.1 MEP 5.0 (mode YARN) | Oui | Oui | |
6.1 / MEP 6.1 | Oui | Oui | |
Amazon EMR 3 | 4.5.0 (Apache 2.7.2) | Oui | |
4.6.0 (Apache 2.7.2) | Oui | ||
5.0.0 (Apache 2.7.2) | Oui | ||
5.5.0 (Apache 2.7.2) | Oui | ||
5.8.0 (Apache 2.7.2) | Oui | ||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec Hive | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | |||
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | |||
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | Oui | Oui | |
6.0.1 MEP 5.0 (mode YARN) | Oui | Oui | |
6.1 / MEP 6.1 | |||
Amazon EMR3 | 4.5.0 (Apache 2.7.2) | Oui | |
4.6.0 (Apache 2.7.2) | Oui | ||
5.0.0 (Apache 2.7.2) | Oui | ||
5.5.0 (Apache 2.7.2) | Oui | ||
5.8.0 (Apache 2.7.2) | Oui | ||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec Pig | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | Oui | Oui | |
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | Oui | Oui | |
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | Oui | Oui | |
6.0.1 MEP 5.0 (mode YARN) | Oui | Oui | |
6.1 / MEP 6.1 | Oui | Oui | |
Amazon EMR 3 | 4.5.0 (Apache 2.7.2) | Oui | |
4.6.0 (Apache 2.7.2) | Oui | ||
5.0.0 (Apache 2.7.2) | Oui | ||
5.5.0 (Apache 2.7.2) | Oui | ||
5.8.0 (Apache 2.7.2) | Oui | ||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec Sqoop | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | Oui | Oui | |
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | Oui | Oui | |
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | Oui | Oui | |
6.0.1 MEP 5.0 (mode YARN) | Oui | Oui | |
6.1 / MEP 6.1 | Oui | Oui | |
Amazon EMR 3 | 4.5.0 (Apache 2.7.2) | Oui | |
4.6.0 (Apache 2.7.2) | Oui | ||
5.0.0 (Apache 2.7.2) | Oui | ||
5.5.0 (Apache 2.7.2) | Oui | ||
5.8.0 (Apache 2.7.2) | Oui | ||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec Talend MapReduce | Supporte Kerberos Kinit et Keytab |
---|---|---|---|
HDP | v2.4.0 | Oui | Oui |
v2.5.0 | Oui | Oui | |
v2.6.0 | Oui | Oui | |
v2.6.0.3-8 | Oui | Oui | |
Cloudera | 5.5 (mode YARN) | Oui | Oui |
5.6 (mode YARN) | Oui | Oui | |
5.7 (mode YARN) | Oui | Oui | |
5.8 (mode YARN) | Oui | Oui | |
5.10 (mode YARN) | Oui | Oui | |
5.12.1 (mode YARN) | Oui | Oui | |
5.13.0 | Oui | Oui | |
6.1.1 | |||
MapR 1, 2 | 5.0.0 (mode YARN) | Oui | Oui |
5.1.0 (mode YARN) | Oui | Oui | |
5.2.0 (mode YARN) | Oui | Oui | |
6.0.0 (mode YARN) | Oui | Oui | |
6.0.1 MEP 5.0 (mode YARN) | Oui | Oui | |
Amazon EMR 3 | 4.5.0 (Apache 2.7.2) | Oui | |
4.6.0 (Apache 2.7.2) | Oui | ||
5.0.0 (Apache 2.7.2) | Oui | ||
5.5.0 (Apache 2.7.2) | Oui | ||
5.8.0 (Apache 2.7.2) | Oui | ||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | Oui |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.
Distribution Hadoop | Version | Fonctionne avec Spark Standalone | Fonctionne avec Spark YARN | Supporte Kerberos Kinit et Keytab |
---|---|---|---|---|
HDP | v2.4.0 | v1.6 | Oui (YARN uniquement) | |
v2.5.0 | v1.6 | Oui (YARN uniquement) | ||
v2.6.0 | v1.6 / v2.1 | Oui (YARN uniquement) | ||
v2.6.0.3-8 | v1.6 / v2.1 | Oui (YARN uniquement) | ||
Cloudera | 5.5 (mode YARN) | v1.5 | v1.5 | Oui (YARN uniquement) |
5.6 (mode YARN) | v1.5 | v1.5 | Oui (YARN uniquement) | |
5.7 (mode YARN) | v1.6 | v1.6 | Oui (YARN uniquement) | |
5.8 (mode YARN) | v1.6 | v1.6 / v2.1 | Oui (YARN uniquement) | |
5.10 (mode YARN) | v1.6 / 2.1 | v1.6 / v2.1 | Oui (YARN uniquement) | |
5.12.1 (mode YARN) | v2.2 | v2.2 | Oui (YARN uniquement) | |
5.13.0 | v2.2 | v2.2 | Oui (YARN uniquement) | |
6.1.1 | v2.4 | v2.4 | Oui (YARN uniquement) | |
MapR 1, 2 | 5.0.0 (mode YARN) | v1.3 | v1.3 | Oui (YARN uniquement) |
5.1.0 (mode YARN) | v1.5 | v1.5 | Oui (YARN uniquement) | |
5.2.0 (mode YARN) | v1.6 | v1.6 | Oui (YARN uniquement) | |
6.0.0 (mode YARN) | v2.1 | v2.1 | Oui (YARN uniquement) | |
6.0.1 MEP 5.0 (mode YARN) | v2.2 | v2.2 | Oui (YARN uniquement) | |
6.1 / MEP 6.1 | v2.3 | v2.3 | Oui (YARN uniquement) | |
Amazon EMR 3 | 4.5.0 (Apache 2.7.2) | v1.6 | ||
4.6.0 (Apache 2.7.2) | v1.6 | |||
5.0.0 (Apache 2.7.2) | v2.0 | |||
5.5.0 (Apache 2.7.2) | v2.1 | |||
5.8.0 (Apache 2.7.2) | v2.2 | |||
5.15.0 (Hadoop 2.8.3).0 (Apache 2.7.2) | v2.3 | Oui (YARN uniquement) |
1. Pour toutes les versions de MapR antérieures à la version 6.0, le mécanisme de ticket de sécurité de MapR est supporté par le Studio.
2. MapR 6.0 ne supporte plus HBase, mais supporte à présent MapR-DB. Pour plus d'informations, consultez https://maprdocs.mapr.com/home/ReleaseNotes/install_upgrade_notes.html.
3. Les versions d'Amazon EMR supportées par le composant tAmazonEMRManage sont les versions 4.0.0, 4.1.0, 4.2.0, 4.5.0, 4.6.0, 4.9.2 et 5.11.0.