Data Quality:新功能 - 7.2

Talend Master Data Management 产品发布说明

EnrichVersion
7.2
EnrichProdName
Talend MDM Platform
task
数据治理

功能

描述

数据集市异步创建 Talend Studio 创建数据质量数据集市的操作现在为异步操作。此功能允许用户在创建数据质量数据集市时在 Talend Studio 中执行其他操作。
利用格式保留加密方法屏蔽数据 tDataMaskingtPatternMasking 组件现在可以利用格式保留加密算法安全地屏蔽数据,通过提供密码允许可重复和双射屏蔽。在不知道提供的密码的情况下,原始数据不可读取。
取消数据屏蔽 当使用 tDataMaskingtPatternMasking 组件结合格式保留加密算法和密码屏蔽数据时,使用 tDataUnmaskingtPatternUnmasking 组件可以分别通过使用相同密码屏蔽反转来获取原始数据。
数据加密和数据解密 新的 tDataEncrypt 组件可以通过使用 AES-GCM 和 Blowfish 算法以及用户定义的密码对数据进行加密来保护数据。在不知道提供的密码和生成的加密文件的情况下,加密的数据不可读取。

tDataDecrypt 组件可以解密使用 tDataEncrypt 组件加密的数据。

匹配组 tMatchGroupGRP_QUALITY 输出列现在取决于匹配算法。当使用 t-Swoosh 算法时,将通过取组的所有记录对中的最小值来计算 GRP_QUALITY 值。当具有多个输出时,这可能会对结果产生影响,因为 GRP_QUALITY 值决定了记录前往哪个输出流。

简单 VSR 算法的行为未经修改。

Spark 2.4 支持 Talend 在具有以下组件的 Talend Studio 中运行作业时支持 Spark 2.4 (本地模式):
  • tALSModel
  • tCompareColumns
  • tDataMasking
  • tDataShuffling
  • tGenKey
  • tJapaneseNumberNormalize
  • tJapaneseTokenize
  • tJapaneseTransliterate
  • tMatchIndex
  • tMatchIndexPredict
  • tMatchModel
  • tNaiveBayesModel
  • tPatternMasking
  • tPredict
  • tRandomForestModel
  • tRecommend
  • tReservoirSampling
  • tRuleSurvivorship
  • tStandardizePhoneNumber
  • tStandardizeRow
  • tSynonymSearch
  • tTransliterate
  • tVerifyEmail
对其他数据库的支持 Talend 现在支持适用于数据质量数据集市的其他数据库:
  • Amazon RDS for Aurora
  • Amazon RDS for MySQL
  • Amazon RDS for PostgreSQL
  • Amazon RDS for Oracle
  • Amazon RDS for SQL Server
  • Azure Database for MySQL
  • Azure Database for PostgreSQL
  • Azure SQL Database
  • Oracle 18c
对其他数据库的支持 Talend 现在支持适用于 Profiling 透视图的其他数据库:
  • Amazon RDS for Aurora
  • Amazon RDS for MariaDB
  • Amazon RDS for Oracle
  • Amazon RDS for PostgreSQL
  • Amazon RDS for SQL Server
  • AS/400 V7R1 至 V7R3
  • Azure Database for MySQL
  • Azure Database for PostgreSQL
  • Azure SQL Database
  • Google BigQuery (通过 JDBC)
  • IBM DB2 11.1
  • Ingres 10.2
  • Netezza 7.2
  • Oracle 18c
  • Snowflake (通过 JDBC)
  • Sybase 15.5/15.7
  • Teradata 16
存活规则 T-Swoosh 算法支持非日期列上的 most ancient (最古老)Most recent (最新) 的存活函数。
tBRMS tBRMS 组件现在支持 Red Hat Decision Manager 7.3