Accéder au contenu principal Passer au contenu complémentaire

Créer une définition de métadonnée de cluster Hadoop

Vous pouvez créer une définition de métadonnée de cluster Hadoop pour pouvoir configurer rapidement votre composant avec les informations de connexion au cluster Hadoop. Le Studio Talend vous permet également d'importer une définition de métadonnée de cluster.

Avant de commencer

  • Ce tutoriel utilise un cluster Hadoop. Vous devez avoir un cluster Hadoop disponible.
  • Sélectionnez la perspective Integration (Window > Perspective > Integration).

Procédure

  1. Dans la vue Repository, développez Metadata, cliquez-droit sur Hadoop Cluster et sélectionnez Create Hadoop Cluster.
  2. Dans le champ Name, saisissez un nom.

    Exemple

    MyHadoopCluster
  3. Facultatif : Dans le champ Purpose, saisissez un objectif.

    Exemple

    Cluster connection metadata
  4. Facultatif : Dans le champ Description, saisissez une description.

    Exemple

    Metadata to connect to a Amazon EMR cluster
    Note InformationsConseil : Saisir un objectif dans le champ Purpose et une Description permet une meilleure organisation.
  5. Cliquez sur Next.
  6. Sélectionnez une Distribution.

    Exemple

    Sélectionnez Amazon EMR et EMR 5.15.0 (Hadoop 2.8.3).
  7. Sélectionnez une Version.

    Exemple

    Sélectionnez EMR 5.15.0 (Hadoop 2.8.3).
  8. Sélectionnez Enter manually Hadoop services.
  9. Cliquez sur Finish.
    Vous arrivez dans la fenêtre Hadoop Cluster Connection.
  10. Saisissez vos informations de connexion.

    Exemple

    • Namecode URI : hdfs://hadoopcluster:8020
    • Resource Manager : hadoopcluster:8032
    • Resource Manager Scheduler : hadoopcluster:8030
    • Job History : hadoopcluster:10020
    • Staging directory : /user
  11. Saisissez vos informations d'Authentification.

    Exemple

    • User name : student
  12. Facultatif : Cliquez sur Check Services.
  13. Cliquez sur Finish.

Résultats

La définition de métadonnée de cluster Hadoop s'affiche dans le Repository.

Cette page vous a-t-elle aidé ?

Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – dites-nous comment nous améliorer !