tSqoopImportの設定

手順

tSqoopImportをダブルクリックして、[Component] (コンポーネント)ビューを開きます。
[Mode] (モード)エリアで、[Use Java API] (Java APIの使用)を選択します。
[Version] (バージョン)エリアで、使用するHadoopディストリビューションとそのバージョンを選択します。リストに対応するディストリビューションが見つからない場合は、[Custom] (カスタム)を選択し、Studio Talendで公式にはサポートされていないHadoopディストリビューションに接続します。
この[Custom] (カスタム)オプションを使用する手順の例は、カスタムHadoopディストリビューションに接続をご覧ください。
[NameNode URI] (名前ノードURI)フィールドに、使用するディストリビューションのマスターノード、NameNodeの場所を入力します。たとえば、hdfs://talend-cdh4-namenode:8020のようにします。 WebHDFSを使用している場合、ロケーションはwebhdfs://masternode:portnumberとなります。WebHDFS with SSLはまだサポートされていません。
[JobTracker Host]フィールドに、ディストリビューションのJobTrackerの場所を入力します。たとえば、talend-cdh4-namenode:8021のようにします。
JobTrackerのジョブという用語は、http://hadoop.apache.org/のApacheドキュメンテーションで説明されているMRまたはMapReduceジョブを指し示しています。
使用するディストリビューションにkerberos認証が必要な場合は、[Use Kerberos authentication] (Kerberos認証を使用)チェックボックスをオンにして、認証の詳細を入力します。それ以外の場合は、このチェックボックスを解除したままにしておきます。

ログインにKerberosのkeytabファイルが必要な場合は、[Use a keytab to authenticate] (認証にkeytabを使用)チェックボックスをオンにします。keytabファイルには、Kerberosのプリンシパルと暗号化されたキーのペアが含まれています。使用するプリンシパルを[Principal] (プリンシパル)フィールドに入力し、keytabファイルへのアクセスパスを[Keytab] フィールドに入力します。このキータブファイルは、ジョブが実際に実行されているマシン(Talend JobServerなど)に保存する必要があります。

keytabが有効なジョブは、プリンシパルに任命されたユーザーでなくても実行できますが、使用するkeytabファイルの読み取り権限が必要です。たとえばuser1というユーザー名でジョブを実行し、使用するプリンシパルがguestの場合、user1に使用するキータブファイルの読み取り権限があることをご確認ください。
[Connection] (接続)フィールドに、ソーステーブルが保管されているMySQLデータベースのURIを入力します。たとえば、 jdbc:mysql://10.42.10.13/mysqlのようにします。
[Username] (ユーザー名)および[Password] (パスワード)に、認証情報を入力します。
[Driver JAR] (ドライバーJAR)テーブルの下で、[+]ボタンをクリックして1行を追加し、この行で[...]ボタンをクリックしてドロップダウンリストを表示し、そのリストから使用するjarファイルを選択します。このシナリオでは、mysql-connector-java-5.1.30-bin.jarになります。
[...]ボタンが表示されない場合、この行のどこかをクリックすると表示されます。
[Table Name] (テーブル名)フィールドに、ソーステーブルの名前を入力します。このシナリオでは、sqoopmergeになります。
[File format] (ファイル形式)ボックスのリストで、使用するデータに対応する形式を選択します。このシナリオではtextfileになります。
[Specify target dir] (ターゲットディレクトリーの指定)チェックボックスをオンにして、データのインポート先にするフォルダーを入力します。たとえば、/user/ychen/target_oldのようにします。

このページは役に立ちましたか?

このページまたはコンテンツに、タイポ、ステップの省略、技術的エラーなどの問題が見つかった場合は、お知らせください。改善に役立たせていただきます。

こちらにフィードバックをお寄せください