Skip to main content

6.0.2更新日志

上线时间：2023-05-25

功能新增​

【5.3】新增数据源支持Hive_MRS、Trino​

【5.2】告警通道中的自定义告警通道支持显示多通道​

【背景】业务中心配置多个自定义告警通道时资产只展示一个，但实际发送告警时将对每个自定义告警通道进行告警信息发送，存在告警信息发送冗余，且与其他子产品的逻辑不一致。

【优化】对于自定义告警通道像其他子产品一样显示所有告警通道，且可选择一个或多个进行告警信息的发送，修改范围包括元数据订阅、质量规则等所有涉及告警配置的位置。

【5.3】规范建表数仓层级绑定数据库逻辑优化​

【背景】一个数仓层级只能绑一个库，实际用户在数仓时可能存在跨库多主题或者多主题单库，需要数仓层级与库的绑定关系更为灵活；

【优化】数仓层级与库不再与数据库配置绑定关系，规范建表时可在选择数仓层级后另外选择数据源；

img

【5.3】规范建表支持AnalyticDB PostgreSQL表​

功能优化​

【5.3】资产监听离线IDE的DDL语句，SQL解析后元数据变更实时更新在资产数据地图​

目前支持的meta数据源范围：Hive、AnalyticDB PostgreSQL、TiDB、Inceptor、Hashdata、StarRocks

【5.3】离线删除项目后资产自动引入的meta数据源将同步删除​

【6.0】Hive元数据技术属性增加表类型说明，可标识其为Iceberg表或者其他格式的表​

【5.3】Inceptor表支持表血缘​

image-20230510153616974

【6.0】数据脱敏优化​

脱敏方式除覆盖外另支持转义和算法加密、支持对指定人群脱敏/指定人群不脱敏，并支持按用户组进行用户范围选择；

【6.0】数据地图迁移后，所有租户下拥有离线产品权限的用户都自动增加资产的访客权限；​

【6.0】表生命周期到期后处理方式调整​

【背景】资产数据模型和质量的脏数据表生命周期到期逻辑不一致：资产数据模型在表生命周期到期后将保存元数据信息，导致无用元数据信息不断累积，元数据查询性能受到影响。质量的脏数据表在生命周期到期后删除元数据信息。仅Hive表支持了生命周期；

【优化】资产数据模型中的表生命周期到期后也删除元数据信息，即最后统一为：

例如将表生命周期设置为10天，则：

对于非分区表，当前日期 - 最后一次数据修改日期 > 10天后，平台将自动删除该表；

对于分区表，当前日期 - 某分区最后一次数据修改日期 > 10天后，平台将自动删除该分区。分区全部删除后表将被删除。

另外Inceptor表也支持了生命周期设置；

【6.0】支持离线创建项目生成的Oracle、SQL Server meta数据源在资产的自动授权​

体验优化​

【6.0】产品Logo可在业务中心统一配置

【5.3】所有下拉框增加loading效果，质量校验规则、任务、数据源管理、元数据管理、文件治理的列表筛选框增加模糊搜索

【5.2】数据质量告警的告警top20增加告警时间的显示；