R2022-09の新機能 - Cloud - 8.0

Talendリリースノート

Version
Cloud
8.0
Language
日本語
Product
Talend Big Data
Talend Big Data Platform
Talend Cloud API Services Platform
Talend Cloud Big Data
Talend Cloud Big Data Platform
Talend Cloud Data Integration
Talend Cloud Data Management Platform
Talend Cloud Real-Time Big Data Platform
Talend Data Fabric
Talend Data Integration
Talend Data Management Platform
Talend Data Services Platform
Talend ESB
Talend MDM Platform
Talend Real-Time Big Data Platform
Module
Talend Cloud API Designer
Talend Cloud API Tester
Talend Cloud Data Inventory
Talend Cloud Data Preparation
Talend Cloud Data Stewardship
Talend Cloud Pipeline Designer
Talend Data Preparation
Talend Data Stewardship
Talend Management Console
Talend Studio
Content
インストールとアップグレード
リリースノート
Last publication date
2024-03-15

Big Data: 新機能

機能

説明

対象製品

ローカルモードでSpark Universal 3.3.xをサポート [Local] (ローカル)モードのSpark 3.3.xで、Spark Universalを使ってSpark BatchジョブとSpark Streamingジョブを実行できるようになりました。Sparkジョブの[Spark configuration] (Spark設定)ビューまたは[Hadoop Cluster Connection] (Hadoopクラスター接続)メタデータウィザードのどちらかで設定できます。

Talend Data Mapper本リリースの時点では、Big DataコンポーネントとTalend Data QualityコンポーネントはSpark 3.3.xと互換性がないため、このパッチでは引き続きSpark Universal 3.2.xがデフォルトバージョンとなります。Spark 3.3.xはR2020-10以降のバージョンでサポートされています。

対象製品:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

GCPでのSpark Universal 3.2.xの使用でDatabricksランタイム10.x以降をサポート Google Cloud Platform (GCP)で、Spark 3.2.xと共にSpark Universalを使い、Databricksのジョブクラスターと汎用クラスターでSpark BacthジョブやStreamingジョブを実行できるようになりました。Sparkジョブの[Spark configuration] (Spark設定)ビューまたは[Hadoop Cluster Connection] (Hadoopクラスター接続)メタデータウィザードのどちらかで設定できます。

このモードを選択すると、Talend StudioはDatabricks 10.x以降のバージョンと互換性を持つようになります。

対象製品:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

SparkジョブのDatabricksでジョブクラスターを汎用クラスターに切り替えられるコンテキストグループをサポート コンテキストグループを使い、Databricksでジョブクラスターを汎用クラスターに切り替えられるようになりました。Databricksクラスターへの接続を設定する際に、Sparkジョブの実行時に使用する特定のコンテキストグループを追加できるようになりました。Sparkジョブの[Spark configuration] (Spark設定)ビューと[Hadoop Cluster Connection] (Hadoopクラスター接続)メタデータウィザードのいずれでも設定できますが、[Hadoop Cluster Connection] (Hadoopクラスター接続)メタデータウィザードで設定することをお勧めします。

対象製品:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

SparkジョブでダイナミックスキーマをサポートするようtFileInputDelimitedを強化 Spark BatchジョブでtFileInputDelimitedのスキーマにダイナミックカラムを追加できるようになりました。ダイナミックスキーマ機能により、スタティックでない方法でスキーマを設定できるため、将来スキーマを変更する時にジョブを再デザインする必要がなく、常に機能することが保証されています。

対象製品:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

Spark Batch 3.1以降でMongoDB v4+をサポート データセットを使ったSpark Batchジョブの次のコンポーネントに関し、Talend StudioでSpark 3.1以降のバージョンを使用するMongoDB v4+がサポートされました。
  • tMongoDBInput
  • tMongoDBOutput
  • tMongoDBConfiguration

対象製品:

Big Data

Big Data Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Data Fabric

Real-Time Big Data Platform

サブスクリプションベースであり、Big Dataを伴うTalendの全製品

Data Integration: 新機能

機能

説明

対象製品

Talend Cloud経由でTalend StudioにSSOログイン Talend Cloudでの作業時に、Talend Cloud経由でSSOまたは通常の方法でTalend Studioにログインできるようになりました。ログイン画面に、次の2つのオプションが表示されます。
  • [Log in with Talend Cloud] (Talend Cloudでログイン): Talend Cloud経由でTalend Studioにログインできます。

    なお、Talend Studio.iniファイルに-Dtalend.tmc.datacenter=<region>パラメーターを追加すれば、デフォルトのリージョンTalend Cloudを設定できます。<region>はリージョンの略称で、これはTalend Cloud URLで確認できます。

  • [Other login mode] (他のログインモード): 従来のモードで Talend Studioにログインできます。このオプションは、Talend Cloudで作業していない場合に使用します。
注: 現在のところ、ARM64によるLinuxの場合、Talend Cloud経由のTalend Studioへのログインはサポートされていません。

詳細は、Talend Studioを起動をご覧ください。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

アップデートリポジトリーにアクセスできるよう基本認証をサポート Talend Studioで、Eclipseのセキュアストレージに基づくアップデートリポジトリーの基本認証がサポートされました。詳細は、Talend Studioでのアップデートリポジトリーの基本認証をご覧ください。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

アップデートのインストール時に古いライブラリーをクリーンアップするオプションを追加 Talend Studioで次のいずれかの設定を行うことで、アップデートのインストール時に古いライブラリーを自動的にクリーンアップできるようになりました。
  • Talend Studio .iniファイルで、-Dtalend.studio.m2.cleanパラメーターをtrueに設定する
  • [Preferences] (環境設定) > Talend > [Update settings] (アップデート設定)ビューで、[Clean up libraries] (ライブラリーをクリーンアップ)チェックボックスを選択する
  • アップデートのインストールウィザードで、[Clean up libraries] (ライブラリーをクリーンアップ)チェックボックスを選択する

これによって、ディスク容量を節約し、セキュリティツールがライブラリの脆弱性をスキャンする際に発生するノイズを低減できるようになります。次の点にご注意ください。

  • [Clean up libraries] (ライブラリーをクリーンアップ)チェックボックスは、8.0 R2022-09 Talend Studioマンスリーアップデートをインストールした後でのみ利用できます。8.0 R2022-09 Talend Studioマンスリーアップデートのインストール時に古いライブラリーを自動的にクリーンアップするためには、.iniファイルに-Dtalend.studio.m2.cleanパラメーターを追加し、アップデートをインストールする前にTalend Studioを再起動します。
  • 古いライブラリーをクリーンアップした後は、前にインストールした全サードパーティライブラリーの再ダウンロードが必要になる場合があります。

詳細は、Talend Studioをアップデートをご覧ください。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

Talend Cloudでの作業時にGitコミット作成者としてメールアドレスを使用可能 Talend Management Consoleで管理されているプロジェクトで作業している場合、Talend Management Consoleでは、Talend Studioで変更をGitにコミットする際にログイン名ではなくメールアドレスがGitの作成者およびコミッターとして使用されるようになりました。

対象製品:

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Talend Cloudの全製品とTalend Data Fabric

Google Bigtableに接続してデータを保存および取得できる新コンポーネント Talend Studioで次の新しいコンポーネントがサポートされ、Google Bigtableに接続してデータを保存したり取得したりできるようになりました。
  • tBigtableInput
  • tBigtableOutput
  • tBigtableClose
  • tBigtableConnection

対象製品:

Big Data Platform

Cloud API Services Platform

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Management Platform

Data Fabric

Data Management Platform

Data Services Platform

MDM Platform

Real-Time Big Data Platform

TalendプラットフォームとData Fabricの全製品

Oracleコンポーネントとメタデータウィザードの新たなオプションによってグローバリゼーションサポートを追加 Oracleコンポーネントとメタデータウィザードに追加された[Support NLS] (NLSをサポート)オプションによって、Oracle 18以降のバージョンでグローバリゼーションサポートを有効にできるようになりました。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

Workdayクライアントに書き込める新しいコンポーネント このリリースで追加されたtWorkdayOutputコンポーネントにより、Workdayクライアントにデータを書き込むことができようになりました。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

tPOPでMicrosoft Exchange認証をサポート tPOPコンポーネントに追加されたMicrosoft Exchange認証モードにより、Microsoft Exchange認証モードでメッセージを取得できるようになりました。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

tDataStewardshipTaskInputコンポーネントに関するIDベースのページネーション このオプションを有効にすると、Talend Cloud Data Stewardshipタスクのフェッチとソートのパフォーマンスが向上します。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

Log4j 2使用時にMDCを介してログ属性を追加 ジョブでApache Log4j 2を使用する際に、Log4j 2 MDC (Mapped Diagnostic Context)にキー/値のペアが入力されるようになりました。これらの新しいログ属性によって、複数のスレッドからのログメッセージがすべて単一のファイルに書き込まれる場合に、ログデータが生成されたスレッドを簡単に特定できるようになります。Log4j 2 MDCの詳細は、Log4j 2 API - Thread Contextをご覧ください。

ログを書き込む際にこの新しいログ属性を含めるためには、Talend StudioでLog4j 2テンプレートを設定する必要があります。詳細は、Log4を有効化して設定をご覧ください。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

Data Mapper: 新機能

機能

説明

対象製品

フラットマッピングから階層マッピングへ

新しいタイプのマップでは、フラットストラクチャーから階層構造を作成してマッピングできます。出力構造を編集して配列やレコードを作成したり、特定のエレメントに基づいてデータをグループ化したりできます。出力構造を定義すると、マップが作成され、入力が自動的に出力へとマッピングされます。

対象製品:

Big Data Platform

Cloud API Services Platform

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Management Platform

Data Fabric

Data Management Platform

Data Services Platform

MDM Platform

Real-Time Big Data Platform

TalendプラットフォームとData Fabricの全製品

Data Quality: 新機能

機能

説明

対象製品

ローカルモードおよびDatabricksでSpark 3.2をサポート ローカルモードおよびDatabricksでApache Spark 3.2を使ってDQコンポーネントを実行できるようになりました。
ただし、次の例外があります。
  • tMatchIndextMatchIndexPredict: ローカルモードの場合、これらのコンポーネントはApache Spark 2.4でのみ動作します。Databricksでは動作しません。
  • tDataEncrypttDataDecrypt: これらのコンポーネントは、Apache Spark 3.1以降を使用するDatabricksでは動作しません。
  • tKMeansStrModeltPredictCluster: これらのStreamingコンポーネントは、Apache Spark 3.2を使用するDatabricksでは動作しません。

対象製品:

Big Data Platform

Cloud API Services Platform

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Management Platform

Data Fabric

Data Management Platform

Data Services Platform

MDM Platform

Real-Time Big Data Platform

TalendプラットフォームとData Fabricの全製品

継続的インテグレーション: 新機能

機能

説明

対象製品

Talend CI Builderがバージョン8.0.9にアップグレード Talend CI Builderのバージョンが8.0.8から8.0.9にアップグレードされました。

このマンスリーバージョン以降、Talend CI Builderの新しいバージョンがリリースされるまでCIコマンドやパイプラインスクリプトでTalend CI Builder 8.0.9を使用します。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品

アップデートリポジトリーの基本認証をサポート Talend Studioで基本認証が有効になっている場合は、CIコマンドで次のパラメーターを使うことでTalendアップデートリポジトリーに安全にアクセスできるようになりました。
  • -Declipse.keyring-Declipse.password (Eclipseのセキュアストレージの認証情報)
  • -Dtalend.studio.p2.base.user-Dtalend.studio.p2.base.pwd (Talend Studioベースリポジトリーの認証情報)
  • -Dtalend.studio.p2.update.user-Dtalend.studio.p2.update.pwd (Talend Studioアップデートリポジトリーの認証情報)

詳細は、Talend Studioでのアップデートリポジトリーの基本認証CIビルダー関連のMavenパラメーターをご覧ください。

対象製品:

Big Data

Big Data Platform

Cloud API Services Platform

Cloud Big Data

Cloud Big Data Platform

Cloud Data Fabric

Cloud Data Integration

Cloud Data Management Platform

Data Fabric

Data Integration

Data Management Platform

Data Services Platform

ESB

MDM Platform

Real-Time Big Data Platform

サブスクリプションベースであり、Talend Studioを伴うTalendの全製品