Big Data: 新機能
機能 |
説明 |
対象製品 |
---|---|---|
Spark 3.0でのAzure Synapseディストリビューションのサポート |
Apache Sparkプールを含むAzure Synapse Analyticsを、YARNクラスターモードのSpark 3.0でのみ、Spark BatchおよびSpark Streamingジョブ用の新しいディストリビューションとして使えるようになりました。Sparkジョブの[Spark configuration] (Spark設定)ビューでこれを設定できます。詳細は、Azure Synapse Analytics接続パラメーターを定義をご覧ください。 Azure Synapse Analyticsによって、さまざまな分析エンジンを使い、データを処理できるようになります。Apache Sparkプールでは、さまざまな計算機能(速度や効率など)およびADLS Gen2ストレージとの互換性があります。 重要: ベータ版機能であるため、本番環境での使用には適していません。
|
ⓘ 対象製品: Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform サブスクリプションベースであり、Big Dataを伴うTalendの全製品 |
tMap結合条件の詳細な式 |
tMapコンポーネントのマップエディターにある[Filter] (フィルター)式エリアを使い、Dataset APIを使ってSpark Batchジョブ内の結合条件の詳細な式を入力できます。この機能によって、以下の式を使って、結合条件からデータをフィルタリングできるようになります:
たとえば、日付では複雑な式を使えます:
|
ⓘ 対象製品: Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform サブスクリプションベースであり、Big Dataを伴うTalendの全製品 |
Data Integration: 新機能
機能 |
説明 |
対象製品 |
---|---|---|
複数のプロジェクト項目の古いバージョンを削除するサポート |
[Project Settings] (プロジェクト設定)ダイアログボックスにある ノードの下に[Cleanup] (クリーンアップ)ビューが追加され、それによって
警告: ジョブ、ジョブレット、ルート、ルートレットの古いバージョンを削除する時に依存項目のチェックは行われません。ブランチで削除とクリーンアップの検証を行うことをお勧めします。
|
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |
tCouchbaseInput: N1QL for Analyticsステートメントのサポート |
tCouchbaseinputコンポーネントでは、[Query type] (クエリータイプ)ドロップダウンリストに[N1QL for Analytics]オプションが追加されるようになりました。このオプションによって、N1QL for Analyticsステートメントを使って、半構造化データをクエリーできるようになります。 |
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |
tSQSOutput: メッセージIDを取得して後続のコンポーネントに渡す |
tSQSOutputコンポーネントは、受信したメッセージのIDを取得して、メッセージIDを後続のコンポーネントに渡すことができるようになりました。出力スキーマにMessageIDカラムを追加すれば、実現されます。この関数は、[Use batch mode] (バッチモードを使用)オプションが消去されている場合にアクセスできます。 |
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |
tAzureStoragePut: |
tAzureStoragePutコンポーネントでは、選択されていると[Files] (ファイル)フィールドで |
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |
tSAPTableInput: 文字列NUMC |
tSAPTableInputコンポーネントでは、選択されているとダイナミックカラムでNUMCタイプを文字列として扱う[Read NUMC data as string in the dynamic column] (ダイナミックカラムでNUMCデータを文字列として読み取る)オプションが追加されるようになりました。このオプションが選択されていないと、NUMCタイプのデータは整数として扱われます。 |
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |
MongoDBコンポーネント: MongoDB 4.4.xバージョン以降のSCRAM-SHA-256 SASL認証メカニズムのサポート |
MongoDBコンポーネントでは、MongoDB 4.4.x以降のバージョンが使用される場合にSCRAM-SHA-256 SASL認証メカニズムがサポートされるようになりました。関連情報は、認証メカニズムをご覧ください。 |
ⓘ 対象製品: Big Data Big Data Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Data Fabric Real-Time Big Data Platform サブスクリプションベースであり、Big Dataを伴うTalendの全製品 |
使用されるSAP接続を指定 |
tSAPTableInputコンポーネントとtELTSAPMapコンポーネントでは、使用されるSAP接続のIDを指定できる[Connection id] (接続ID)フィールドが追加されるようになりました。SAP接続IDは、SAP接続設定ファイルの名前です。 このフィールドは、Patch_20210820_TDI-45536_v1-7.3.1というSAP RFCサーバーパッチが適用されることを必要としています。このパッチにによって、SAP RFCサーバーを使って、複数のSAP接続を確立できるようになります。SAP RFCサーバーとSAP接続の設定に関する情報は、RFCサーバーを設定をご覧ください。 |
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |
tSAPDataSourceReceiverとtSAPIDocReceiver: パートナーホスト情報を処理する機能 |
tSAPDataSourceReceiverコンポーネントとtSAPIDocReceiverでは、パートナーホスト情報を処理する機能が追加されるようになりました。情報はメッセージが受信されるSAP接続を識別します。
このフィールドは、Patch_20210820_TDI-45536_v1-7.3.1というSAP RFCサーバーパッチが適用されることを必要としています。このパッチにによって、SAP RFCサーバーを使って、複数のSAP接続を確立できるようになります。SAP RFCサーバーとSAP接続の設定に関する情報は、RFCサーバーを設定をご覧ください。 |
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |
新しいコンポーネント |
今回のリリースで、次の新しいコンポーネントが追加されました: tFileInputParquetとtFileOutputParquet |
ⓘ 対象製品: Big Data Big Data Platform Cloud API Services Platform Cloud Big Data Cloud Big Data Platform Cloud Data Fabric Cloud Data Integration Cloud Data Management Platform Data Fabric Data Integration Data Management Platform Data Services Platform ESB MDM Platform Real-Time Big Data Platform サブスクリプションベースであり、Talend Studioを伴うTalendの全製品 |