Data Quality:新功能 - 7.2

Talend ESB 产品发布说明

Version
7.2
Language
中文(简体)
Product
Talend Data Services Platform
Talend ESB
Talend Open Studio for ESB
Content
数据治理
版本说明

功能

描述

数据集市异步创建 Talend Studio 创建数据质量数据集市的操作现在为异步操作。此功能允许用户在创建数据质量数据集市时在 Talend Studio 中执行其他操作。
利用格式保留加密方法屏蔽数据 tDataMaskingtPatternMasking 组件现在可以利用格式保留加密算法安全地屏蔽数据,通过提供密码允许可重复和双射屏蔽。在不知道提供的密码的情况下,原始数据不可读取。
取消数据屏蔽 当使用 tDataMaskingtPatternMasking 组件结合格式保留加密算法和密码屏蔽数据时,使用 tDataUnmaskingtPatternUnmasking 组件可以分别通过使用相同密码屏蔽反转来获取原始数据。
数据加密和数据解密 新的 tDataEncrypt 组件可以通过使用 AES-GCM 和 Blowfish 算法以及用户定义的密码对数据进行加密来保护数据。在不知道提供的密码和生成的加密文件的情况下,加密的数据不可读取。

tDataDecrypt 组件可以解密使用 tDataEncrypt 组件加密的数据。

匹配组 tMatchGroupGRP_QUALITY 输出列现在取决于匹配算法。当使用 t-Swoosh 算法时,将通过取组的所有记录对中的最小值来计算 GRP_QUALITY 值。当具有多个输出时,这可能会对结果产生影响,因为 GRP_QUALITY 值决定了记录前往哪个输出流。

简单 VSR 算法的行为未经修改。

Spark 2.4 支持 Talend 在具有以下组件的 Talend Studio 中运行作业时支持 Spark 2.4 (本地模式):
  • tALSModel
  • tCompareColumns
  • tDataMasking
  • tDataShuffling
  • tGenKey
  • tJapaneseNumberNormalize
  • tJapaneseTokenize
  • tJapaneseTransliterate
  • tMatchIndex
  • tMatchIndexPredict
  • tMatchModel
  • tNaiveBayesModel
  • tPatternMasking
  • tPredict
  • tRandomForestModel
  • tRecommend
  • tReservoirSampling
  • tRuleSurvivorship
  • tStandardizePhoneNumber
  • tStandardizeRow
  • tSynonymSearch
  • tTransliterate
  • tVerifyEmail
对其他数据库的支持 Talend 现在支持适用于数据质量数据集市的其他数据库:
  • Amazon RDS for Aurora
  • Amazon RDS for MySQL
  • Amazon RDS for PostgreSQL
  • Amazon RDS for Oracle
  • Amazon RDS for SQL Server
  • Azure Database for MySQL
  • Azure Database for PostgreSQL
  • Azure SQL Database
  • Oracle 18c
对其他数据库的支持 Talend 现在支持适用于 剖析 透视图的其他数据库:
  • Amazon RDS for Aurora
  • Amazon RDS for MariaDB
  • Amazon RDS for Oracle
  • Amazon RDS for PostgreSQL
  • Amazon RDS for SQL Server
  • AS/400 V7R1 至 V7R3
  • Azure Database for MySQL
  • Azure Database for PostgreSQL
  • Azure SQL Database
  • Google BigQuery (通过 JDBC)
  • IBM DB2 11.1
  • Ingres 10.2
  • Netezza 7.2
  • Oracle 18c
  • Snowflake (通过 JDBC)
  • Sybase 15.5/15.7
  • Teradata 16
存活规则 T-Swoosh 算法支持非日期列上的 most ancient (最古老)Most recent (最新) 的存活函数。
tBRMS tBRMS 组件现在支持 Red Hat Decision Manager 7.3