Quels sont les pipelines en cours d'exécution sur mon moteur ?
Vous souhaitez voir quels pipelines/quelles préparations s'exécutent sur votre Moteur distant Gen2.
Dépannage 1 : Mappez le port Livy 80 à un port externe pour accéder à l'interface Web de Livy
Procédure
Cause
Un port de réseau dynamique commençant par 4040 est assigné à chaque pipeline/préparation en cours d'exécution. En fonction du nombre d'exécutions concurrentes, une large variété de ports commençant par 4040 peut être exposée dans la section livy du fichier docker-compose.yml pour permettre l'accessibilité de l'interface Web de Spark depuis l'hôte en cours d'exécution.
Dépannage 2 : Exposez les ports de l'interface Web de Spark pour voir les plans d'exécution des Pipelines Spark exécutés sur le moteur
Procédure
Cette page vous a-t-elle aidé ?
Si vous rencontrez des problèmes sur cette page ou dans son contenu – une faute de frappe, une étape manquante ou une erreur technique – dites-nous comment nous améliorer !