tDataQualityRules - Cloud - 8.0

Validation

Version
Cloud
8.0
Language
日本語 (日本)
Product
Talend Big Data
Talend Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Open Studio for Big Data
Talend Open Studio for Data Integration
Talend Open Studio for ESB
Talend Real-Time Big Data Platform
Module
Talend Studio
Content
ジョブデザインと開発 > サードパーティーシステム > データクオリティコンポーネント > 評価検証
データガバナンス > サードパーティーシステム > データクオリティコンポーネント > 評価検証
データクオリティとプレパレーション > サードパーティーシステム > データクオリティコンポーネント > 評価検証

次のデータクオリティルールを使ってデータを検証します:

  • Talend Cloud Data Stewardship、または
  • Talend Data Stewardship 8.0 R2022-07以降

データクオリティルールとは、データが準拠すべき値を定義したビジネス要件のセットのことです。

データクオリティルールをJARファイルに取得する場合は、tDataQualityRulesによってTalend StudioTalend Cloud Data StewardshipTalend Data Stewardshipのハイブリッドバージョンに接続させます。Talend Studioは取得されたライブラリーを使うため、データクオリティルールを自分のデータに適用できるようになります。コンポーネントの動作に関する詳細は、tDataQualityRulesのローカルプロセスとクラウド/ハイブリッドプロセスをご覧ください。

このコンポーネントは、データをカテゴリーとサブカテゴリーに分けて返します。
  • 有効:
    • [Valid] (有効): 条件と検証式を満たすデータ、または代替の検証式のみを満たすデータ。
    • [Not applicable (NA)] (該当なし): データが条件を満たしていません。このデータにはルールを適用できません。

    そのようなデータは[Main] (メイン)フローに従います。

  • 無効:
    • [Invalid] (無効): データは条件を満たすものの、検証式は満たしていません。
    • [Not executable (NE)] (実行不可): データでルールを実行できません。

    そのようなデータは[Reject] (リジェクト)フローに従います。

デフォルトで、このコンポーネントはTalend Studioと共には出荷されていません。機能マネージャーを使ってインストールする必要があります。 詳細は、機能マネージャーを使って機能をインストールをご覧ください。

tDataQualityRulesは以下をサポートします。
  • ローカルモードの場合はApache Spark 3.0以降です。
  • Apache Spark 3.1または 3.2を伴うCloudera Data Engineeringサービス

Talendでサポートされているテクノロジーの詳細は、Talendコンポーネントをご覧ください。

使用しているTalend製品に応じて、このコンポーネントは次のジョブのフレームワークの1つ、一部、またはすべてで使用できます。

  • 標準:tDataQualityRulesの標準プロパティをご覧ください。

    このフレームワーク内のコンポーネントは、Talend Data Management Platform、Talend Big Data Platform、Talend Real Time Big Data Platform、Talend Data Services Platform、Talend Data Fabricで利用できます。

  • Spark Batch:Apache Spark BatchのtDataQualityRulesプロパティをご覧ください。

    このフレームワーク内のコンポーネントは、ビッグデータ対応のTalend Platform製品すべて、およびTalend Data Fabricで利用できます。

  • Spark Streaming:Apache Spark StreamingのtDataQualityRulesプロパティをご覧ください。

    このコンポーネントは、Talend Real Time Big Data PlatformおよびTalend Data Fabricで利用できます。