tFileInputRegex標準プロパティ - 7.3

正規表現

EnrichVersion
Cloud
7.3
EnrichProdName
Talend Big Data
Talend Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Open Studio for Big Data
Talend Open Studio for Data Integration
Talend Open Studio for ESB
Talend Real-Time Big Data Platform
EnrichPlatform
Talend Studio
task
ジョブデザインと開発 > サードパーティーシステム > ファイルコンポーネント > 正規表現
データガバナンス > サードパーティーシステム > ファイルコンポーネント > 正規表現
データクオリティとプレパレーション > サードパーティーシステム > ファイルコンポーネント > 正規表現

これらのプロパティを使って、[Standard] (標準)ジョブフレームワークで実行されているtFileInputRegexを設定します。

[Standard] (標準) tFileInputRegexコンポーネントはファイルファミリーのコンポーネントです。

このフレームワーク内のコンポーネントは、すべてのTalend製品で使用できます。

基本設定

[Property type] (プロパティタイプ)

[Built-In] (組み込み)または[Repository] (リポジトリー)のいずれか。

 

[Built-In] (組み込み): プロパティデータは一元的に保存されません。

 

[Repository] (リポジトリー): プロパティを保存するリポジトリーファイルを選択します。

ファイル名/ストリーム

[File name] (ファイル名): 処理するファイルまたは変数の名前。

警告: エラーを避けるために、このフィールドには(相対パスの代わりに)絶対パスを使用します。

[Stream] (ストリーム): 処理されるデータフロー。オートコンプリートリスト([Ctrl] + [Space])のINPUT_STREAM変数を使用してtFileInputRegexによってデータを収集できるように、データをフローに追加する必要があります。

ジョブで変数を定義して使用する方法の詳細は、『 Talend Studio ユーザーガイド』を参照してください。

[Row separator] (行区切り)

行の終端を識別するために使用される区切り記号。

正規表現

抽出するフィールドに一致するサブパターンを含むJava正規表現を入力します。このフィールドには複数の行を含めることができます。

[Note] (注): 正規表現ではアンチェラッシュを2倍にする必要があります

警告:
  • 正規表現は二重引用符で囲む必要があります。
  • 必要な文字列をすべて抽出するには、文字列に一致するサブパターンが正規表現に含まれていることを確認してください。また、正規表現内の各サブパターンは、ブラケットで囲む必要があります。

[Header] (ヘッダー)

ファイルの先頭でスキップする行の数を入力します。

[Footer] (フッター)

ファイルの最後にスキップする行数。

[Limit] (制限事項)

処理される行の最大数。[Limit] (制限) = 0の場合、行の読み取りや処理は行われません。

不一致レコードのエラーメッセージを無視する

指定した正規表現と一致しないレコードのエラーメッセージを出力しないようにするには、このチェックボックスをオンにします。このチェックボックスは、デフォルトでオフになっています。

[Schema] (スキーマ)および[Edit Schema] (スキーマの編集) (スキーマの編集)

スキーマとは行の説明のことです。処理して次のコンポーネントに渡すフィールド(カラム)数を定義します。Sparkジョブを作成する場合、フィールドの命名時は予約語のlineを避けます。

スキーマを変更するには[Edit schema] (スキーマの編集)をクリックします。現在のスキーマがリポジトリータイプの場合は、3つのオプションを使用できます。

  • [View schema] (スキーマの表示): スキーマのみを表示する場合は、このオプションを選択します。

  • [Change to built-in property] (組み込みのプロパティに変更): ローカルで変更を行うためにスキーマを組み込みに変更する場合は、このオプションを選択します。

  • [Update repository connection] (リポジトリー接続を更新): リポジトリーに保存されているスキーマに変更を加え、変更後にそのコンテンツをすべてのジョブにプロパゲートするかどうかを決める場合は、このオプションを選択します。変更を現在のジョブにのみ反映する場合は、変更後、[No] (いいえ)を選択し、[Repository Content] (リポジトリーのコンテンツ)ウィンドウで再びこのスキーマのメタデータを選択します。

 

[Built-in] (組み込み): そのコンポーネントのみのスキーマを作成して、ローカルに保存します。

 

[Repository] (リポジトリー): スキーマは作成済みで、リポジトリーに保管されています。さまざまなプロジェクトやジョブデザインで再利用できます。

[Skip empty rows] (空の行をスキップ)

このチェックボックスをオンにすると、空の行はスキップされます。

Die on error (エラー発生時に強制終了)

このチェックボックスをオンにすると、エラー発生時にジョブの実行が停止されます。

エラーの発生した行をスキップし、エラーが発生していない行の処理を完了するには、このチェックボックスをオフにします。エラーをスキップしたら、[Row] (行)> [Reject] (リジェクト)リンクを使用してエラーの発生した行を収集できます。

詳細設定

Encoding (エンコーディング)

リストからエンコーディングを選択するか、[CUSTOM] (カスタム)を選択して、手動で定義します。このフィールドはデータベースデータ処理の必須フィールドです。サポートされるエンコーディングは、使用しているJVMに応じて異なります。詳細は、https://docs.oracle.comを参照してください。

tFileInputRegexの Map/Reduce バージョンでは、このリストを表示するには[Custom encoding] (カスタムエンコーディング)チェックボックスをオンにする必要があります。

[tStatCatcher Statistics] (tStatCatcher統計)

このチェックボックスをオンにすると、ジョブレベルやコンポーネントレベルでジョブ処理メタデータが収集されます。

グローバル変数

[Global Variables] (グローバル変数)

NB_LINE: 処理された行の数。これはAfter変数で、整数を返します。

ERROR_MESSAGE: エラーが発生した時にコンポーネントによって生成されるエラーメッセージ。これはAfter変数で、文字列を返します。この変数はコンポーネントにこのチェックボックスが存在し、Die on error (エラー時強制終了)がオフになっている場合にのみ機能します。

Flow変数はコンポーネントの実行中に機能し、After変数はコンポーネントの実行後に機能します。

フィールドまたは式に変数を入れるには、Ctrl + Spaceを押して変数リストにアクセスし、リストから使用する変数を選択します。

変数の詳細は、『 Talend Studio ユーザーガイド』を参照してください。

使用方法

[Usage rule] (使用ルール)

このコンポーネントを使用して、ファイルを読み取り、定義された正規表現に従ってこのファイルに含まれるフィールドを区切ります。Row > Rejectリンクを使用して拒否フローを作成し、定義されたタイプに対応しないデータをフィルタリングすることもできます。この2つのリンクを使用する方法の例は、手順を参照してください。