Hortonworks Data PlatformでのHCatalogテーブルの管理 - 7.3

HCatalog

Version
7.3
Language
日本語 (日本)
Product
Talend Big Data
Talend Big Data Platform
Talend Data Fabric
Talend Open Studio for Big Data
Talend Real-Time Big Data Platform
Module
Talend Studio
Content
ジョブデザインと開発 > サードパーティーシステム > DBツール > HCatalog
データガバナンス > サードパーティーシステム > DBツール > HCatalog
データクオリティとプレパレーション > サードパーティーシステム > DBツール > HCatalog

このシナリオは、ビッグデータ関連Talend製品にのみ適用されます。

Talendでサポートされているテクノロジーの詳細は、Talendコンポーネントを参照してください。

このシナリオでは、Hortonworks Data Platform上でのHCatalogテーブル管理の一般的な操作を含む6コンポーネントジョブについて説明します。このシナリオのサブセクションでは、次のようなDB操作を扱います。

  • HDFSのデータベースへのテーブルの作成

  • HCatalog管理対象テーブルへのデータの書き込み

  • tHCatalogLoadを使った、パーティションテーブルへのデータの書き込み

  • HCatalog管理対象テーブルのデータの読み取り

  • HDFSのテーブルから読み取ったデータの出力

注:

Hiveデータ定義言語とHCatalogデータ定義言語の知識が必要です。Hiveデータ定義言語の詳細は、https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDLを参照してください。HCatalogデータ定義言語の詳細は、https://cwiki.apache.org/confluence/display/HCATALOG/Design+Document+-+Java+APIs+for+HCatalog+DDL+Commandsを参照してください。