Si vous devez importer un grand nombre de jeux de données d'une même source, au lieu de les créer un par un dans Talend Cloud Data Inventory, vous pouvez créer un crawler pour récupérer une liste complète de ressources en une opération.
Le crawling d'une connexion vous permet de récupérer des données à grande échelle et d'enrichir votre inventaire plus efficacement. Après avoir sélectionné une connexion, vous pourrez importer tout son contenu, ou une partie de son contenu, via une recherche et un filtre. Vous pourrez également sélectionner les utilisateur·trices ayant accès aux jeux de données créés.
Vous ne pouvez crawler des données que d'une connexion JDBC. Un seul crawler peut être créé à la fois, à partir d'une connexion.
Avant de commencer
- Le rôle Dataset administrator (Administrateur des jeux de données) ou Dataset manager (Gestionnaire des jeux de données) vous a été attribué dans Talend Cloud Management Console, ou vous avez au moins le droit Crawling - Add (Crawling - Ajout).
- Vous utilisez une version 2022-02 ou supérieure du moteur distant.
Procédure
-
Pour commencer à créer un crawler pour une connexion, vous pouvez :
- placer votre curseur sur votre connexion dans la liste des connexions et cliquer sur l'icône Crawl connection (Crawler la connexion),
- ou cliquer sur votre connexion dans la liste des connexions et, dans l'onglet Crawler du panneau, cliquez sur Add crawler (Ajouter un crawler).
La fenêtre de configuration du crawler s'ouvre et le contenu de la connexion est détecté et listé. - placer votre curseur sur votre connexion dans la liste des connexions et cliquer sur l'icône Crawl connection (Crawler la connexion),