Verarbeiten von Zeichenfolgen über Getreideernten - Cloud

Prozessorhandbuch für Talend Cloud Pipeline Designer
Version
Cloud
Language
Deutsch
Product
Talend Cloud
Module
Talend Pipeline Designer
Content
Design und Entwicklung > Konzeption von Pipelines

Vorbereitungen

  • Sie haben zuvor eine Verbindung zu dem System erstellt, in dem die Quelldaten gespeichert sind.

    In diesem Beispiel eine Verbindung zu Amazon S3.

  • Sie haben zuvor den Datensatz hinzugefügt, der die Quelldaten enthält.

    In diesem Beispiel ein Datensatz mit Daten zur Getreideernte in Mali mit Getreidetyp, Wert der Produktion, abgeernteten Gebieten usw. (laden Sie die Datei string-crops.csv über die Registerkarte Downloads im linken Bereich dieser Seite herunter).

  • Sie haben außerdem die Verbindung und den zugehörigen Datensatz erstellt, der die verarbeiteten Daten aufnehmen soll.

    In diesem Beispiel ein im gleichen S3-Bucket gespeicherter Datensatz.

Prozedur

  1. Klicken Sie auf der Seite Pipelines auf Add pipeline (Pipeline hinzufügen). Ihre neue Pipeline wird geöffnet.
  2. Legen Sie einen sinnvollen Namen für die Pipeline fest.

    Example

    Process strings about harvested crops (Zeichenfolgen über Getreideernten verarbeiten)
  3. Klicken Sie auf ADD SOURCE (QUELLE HINZUFÜGEN), um ein Fenster zu öffnen, in dem Sie die Quelldaten, in diesem Fall Daten zur Getreideernte in Mali im Jahr 2005, auswählen können.

    Example

  4. Wählen Sie den Datensatz aus und klicken Sie auf Select (Auswählen), um ihn zur Pipeline hinzuzufügen.
    Benennen Sie den Datensatz um, falls erforderlich.
  5. Klicken Sie auf und fügen Sie einen Prozessor vom Typ Strings (Zeichenfolgen) zur Pipeline hinzu. Daraufhin wird das Konfigurationsfenster geöffnet.
  6. Geben Sie einen sinnvollen Namen für den Prozessor an.

    Example

    change crop types to upper case (Getreidetypen in Großbuchstaben ändern)
  7. Führen Sie im Bereich Configuration (Konfiguration) Folgendes durch:
    1. Wählen Sie Change to upper case (In Großbuchstaben ändern) in der Liste Function name (Funktionsname) aus.
    2. Wählen Sie .crop_parent (Getreide_Kategorie) in der Liste Fields to process (Zu verarbeitende Felder) aus, um die Getreidetypwerte in Großbuchstaben zu ändern.
  8. Klicken Sie auf Save (Speichern), um die Konfiguration zu speichern.

    Sehen Sie sich die Vorschau des Prozessors an, um die Daten vor dem Vorgang mit denjenigen nach dem Vorgang zu vergleichen.

  9. Klicken Sie auf und fügen Sie einen weiteren Prozessor vom Typ Strings (Zeichenfolgen) zur Pipeline hinzu. Daraufhin wird das Konfigurationsfenster geöffnet.
  10. Geben Sie einen sinnvollen Namen für den Prozessor an.

    Example

    match crop IDs with IDs (Getreide-IDs mit IDs abstimmen)
  11. Führen Sie im Bereich Configuration (Konfiguration) Folgendes durch:
    1. Wählen Sie Match similar text (Ähnlichen Text suchen) in der Liste Function name (Funktionsname) aus.
    2. Wählen Sie .crop (Getreide) in der Liste Fields to process (Zu verarbeitende Felder) aus.
    3. Wählen Sie Other column (Andere Spalte) in der Liste Use with (Verwenden mit) und .id in der Liste Column (Spalte) aus, um die Getreidenamens-ID mit der Datensatz-ID zu vergleichen.
    4. Geben Sie 0 in das Fuzziness-Feld ein, da Sie nach genauen Übereinstimmungen zwischen den zwei Feldwerten suchen.
  12. Klicken Sie auf Save (Speichern), um die Konfiguration zu speichern.

    Sehen Sie sich die Vorschau des Prozessors an, um die Daten vor dem Vorgang mit denjenigen nach dem Vorgang zu vergleichen. Sie sehen jetzt die neue Spalte crop_matches (Getreide_Übereinstimmungen), in der die genauen Übereinstimmungen den Wert true und nicht übereinstimmende IDs den Wert false aufweisen.

  13. Klicken Sie auf ADD DESTINATION (ZIEL HINZUFÜGEN) und wählen Sie den Datensatz aus, der die verarbeiteten Daten aufnehmen soll.
    Benennen Sie den Datensatz um, falls erforderlich.
  14. Klicken Sie in der oberen Symbolleiste von Talend Cloud Pipeline Designer auf die Schaltfläche Run (Ausführen), um das Fenster zur Auswahl des Ausführungsprofils zu öffnen.
  15. Wählen Sie in Ihr Ausführungsprofil in der Liste aus (weitere Informationen finden Sie unter Ausführungsprofile) und klicken Sie dann auf Run (Ausführen), um die Pipeline auszuführen.

Ergebnisse

Ihre Pipeline wird ausgeführt, die ausgewählten Zeichenfolgen werden verarbeitet und der Ausgabe-Flow an das von Ihnen angegebene S3-Bucket gesendet.