このページ上

メインコンテンツをスキップする

このページは役に立ちましたか?

このページまたはコンテンツに、タイポ、ステップの省略、技術的エラーなどの問題が見つかった場合は、お知らせください。改善に役立たせていただきます。

HDFSファイルのプロファイリング

Studio TalendのProfilingパースペクティブから、Hive接続経由でHDFSファイルに対してシンプル統計インジケーターを使用してカラム分析を作成できます。

HDFSファイルにプロファイリング分析を作成するステップは以下のとおりです。

Hadoopクラスターへの接続を作成します。
Hiveサーバーへの接続を作成します。
HDFSファイルへの接続を作成する際、Hiveへの接続を同時に作成するよう画面上で指示されるため、このステップは必須ではありません。
HDFSファイルへの接続を作成します。
この手順に従ってHiveの 外部テーブルを作成できます。その結果、データはファイル内に残りますが、Hiveメタストア内にテーブルの定義が作成されます。これにより、StudioはHive接続経由でファイル内のデータにSQLクエリーを実行できるようになります。
Hiveテーブルの単純なインジケーターでカラム分析を作成します。

続いて、必要に応じて分析の設定を変更し、他のインジケーターを追加できます。後で、同じHiveテーブルを使用して、このHDFSファイルに別の分析を作成することもできます。