Talend Big Data Platform機能アーキテクチャ - 7.1

Talend Big Data Platform入門ガイド

EnrichVersion
7.1
EnrichProdName
Talend Big Data Platform
EnrichPlatform
Talend Administration Center
Talend DQ Portal
Talend Installer
Talend Runtime
Talend Studio
task
インストールとアップグレード
ジョブデザインと開発
データクオリティとプレパレーション > データクレンジング
データクオリティとプレパレーション > データプロファイリング

Talend Big Data Platform論理機能アーキテクチャーは、Talend Big Data Platform機能、相互作用、対応するITニーズを特定するアーキテクチャーモデルです。アーキテクチャー全体は、特定の機能を機能ブロックに分離することで説明されています。

下の図は主なアーキテクチャー機能ブロックです。

機能ブロックのタイプは以下のとおりです。

  • Talend Studioから、Hadoopクラスターを活用するビッグデータジョブをデザインして起動し、大量のデータセットを処理します。これらのジョブは、起動すると、このHadoopクラスターに送られ、そこでデプロイされ、実行されます。

    Studioから、定義済みのパターンとインジケーターを使用して、さまざまなデータソースに保存されているデータを分析し、分析結果を参照およびクエリーして、破損、不完全、不正確なデータを削除することもできます。

  • Talendシステムから独立したHadoopクラスターでは、大量のデータセットを処理します。

  • ジョブをデプロイして実行するためにHadoopクラスターの中または外にインストールされたTalend JobServerまたはRuntime。

    Hortonworksクラスターの場合は、ファイアウォールやアクセスの問題を回避できるよう、JobServerまたはRuntimeをエッジノードのマシンにインストールすることをお勧めします。

    Amazon EMRクラスターの場合も、JobServerまたはRuntimeをクラスターにインストールすることをお勧めします。

  • Talend DQ Portalから、分析結果に関するレポートを生成し、他のビジネスユーザーと共有できます。