関連するDelta Lakeデータセットを使ってUSフライトの前日比の変化を計算する - Cloud - 8.0

Delta Lake

Version
Cloud
8.0
Language
日本語
Product
Talend Big Data
Talend Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Real-Time Big Data Platform
Module
Talend Studio
Content
ジョブデザインと開発 > サードパーティーシステム > テクニカルコンポーネント > Delta Lake components
データガバナンス > サードパーティーシステム > テクニカルコンポーネント > Delta Lake components
データクオリティとプレパレーション > サードパーティーシステム > テクニカルコンポーネント > Delta Lake components
Last publication date
2024-02-28

このシナリオのジョブは、サンプルのDelta Lakeデータセットを使用して、米国のフライトの日々の主要業績評価指標(KPI)を計算します。

USフライトKPIのDelta Lakeサンプルが含まれているジョブ。

Talendがサポートしているテクノロジーの詳細は、Talendコンポーネントをご覧ください。

前提条件:
  • Delta Lakeで使用するファイルシステムは、S3またはAzureである必要があります。
  • 使用する認証情報にこのファイルシステムに対する読み書き権限があることをご確認ください。
  • 使用するサンプルのDelta Lakeデータセットは、Talend Help Centerからダウンロードされ、ファイルシステムに保存されています。
    このデータセットは、デモンストレーション目的でのみ使用されます。これには、日付ごとに2つの米国のフライトのスナップショットが含まれており、各日付でのこれらのフライトの進展を示しています。
    フライトの概要が表示されているAmazon S3コンソール。

常に必要というわけではありませんが、HadoopクラスターのエッジノードにTalend JobServerをインストールすることをお勧めします。次に、Talend Studio[Preferences] (環境設定)ダイアログボックスで(またはジョブで実行できる場合はTalend Administration Centerで)このTalend JobServerをジョブのリモート実行サーバーとして定義します。