Skip to main content

6.1.5更新日志

上线时间：2024-02-21

功能新增​

【元数据】丰富元数据的展示信息【上线版本：6.0】​

功能说明:

1、数据地图>表详情页面支持在数据表名下方展示表质量评分(若该表无质量评分则不展示），支持点击数据质量评分后跳转至数据质量>质量报告> 该数据表的质量报告

image-2024031401

2、表信息新增热度统计按钮并新增订阅数、使用次数、查看次数、影响表数

3、针对操作记录板块新增DML操作记录，并将之前做的操作记录从6.1迁回6.0

image-2024031402

【数据治理】数据治理新增功能的迁移【上线版本：6.0】​

功能说明：数据治理新增的治理概览、治理工作台、治理配置、以及用户移除一键转让功能均迁移到6.0版本

【数据安全】数据权限管理新增权限回收功能【上线版本：6.0】​

功能说明：对用户自己申请通过的数据权限做一个回收功能，数据权限管理页面新增一个tab为“权限回收”，列表展示每个用户自己申请且已经通过的权限列表，可通过权限回收将此用户的权限信息删除。默认仅管理员有权限回收权限

image-2024031403

【数据模型】规范建表的建表想到模式配置内容扩充【上线版本：6.0】​

功能说明：

1、向导模式配置内容扩充：

（1）针对adb类型建表支持配置字段是否为主键、是否为空，精度值；

（2）针对inceptor、hive、spark类型建表支持配置精度值；

（3）inceptor支持配置事务表/非事务表，支持指定hdfs存储路径。

2、当数据标准中配置了长度、精度信息时，引用标准可自动同步

3、支持hive3.x（Apache）类型数据源的建表，建表逻辑和hive2.x保持一致

image-2024031404

功能优化​

【数据安全】用户在数据安全模块默认进入第一个有权限的页面【上线版本：6.0】​

背景：非管理员用户没有数据权限管理权限，点击数据安全模块进入会出现问题

功能说明：用户点击数据安全模块后，能够进入该用户第一个有权限的 tab 页面

【资产盘点】数据价值排行逻辑优化【上线版本：6.0】​

背景：减少存储压力，对资产盘点页面的数据价值排行进行逻辑优化

功能说明：数据价值排行最大统计最近1年的数据，后端目前存的是全量的，随着时间增长数据量会变大，影响查询性能，故后端只需要保留最近1年的数据即可

【元数据】离线任务和API字段级血缘按钮移除【上线版本：5.3】​

功能说明：离线任务和API查看血缘关系时,移除字段级血缘功能按钮和提示框

image-2024031405

【元数据】离线IDE生命周期自动同步功能迁移【上线版本：5.3】​

功能说明：离线ide脚本生命周期自动同步功能从6.1迁移至5.3

【元数据】数据目录显示和拖动优化【上线版本：5.3】​

背景：数据资产-》元数据-》数据地图-》数据目录：因左侧栏固定宽度，导致目录显示不全

功能说明：数据地图-》数据目录、数据标准-》码表管理、数据标准-》标准管理(包括标准定义和标准映射)、数据安全-》数据分级分类-》自动分级的数据目录支持左右拉伸，支持选择该层级的整个范围进行拖动

image-2024031406

【元数据】生命周期统一在元数据管理模块编辑【上线版本：5.3】​

功能说明：不支持通过数据地图—表详情来修改表的生命周期。数据地图中移除表生命周期编辑入口，仅展示生命周期信息，用户统一在元数据管理模块对表生命周期进行编辑

image-2024031407

【元数据】支持对表负责人的权限点管理【上线版本：5.3】​

功能说明：

1、表负责人变更为非必填属性，针对没有表负责人修改权限的用户，点击编辑业务属性页面时，无编辑“表负责人”选择框；

2、针对没有表负责人修改权限的用户，上传文件后需要校验上传用户是否有表负责人的编辑权限，若无编辑权限，则导入的表负责人不生效（数据开发和访客角色默认无表负责人修改权限）

image-2024031408

image-2024031409

【数据质量】规则配置手动输入分区datestamp写法优化【上线版本：5.3】​

功能说明：支持多表比对输入分区时可以支持带‘’（英文分号）的写法

image-2024031410

【数据质量】单表校验波动检测结果取值调整为取最新值【上线版本：5.3】​

背景：针对单表校验中波动检测结果取值，若当天运行了多次结果，目前取的是平均值，应该取当天的最新值

功能说明：表行数的1天波动性检、表行数的7天波动检测、月度波动检测测取值应该修改为取最新值

【数据质量】规则配置导入校验进行调整【上线版本：5.3】​

功能说明：规则描述最大50个字符修改为最大200个字符，当识别到规则名称、描述超过50个字符时，进行报错提示，需要导入信息全部正确，再提示“文件上传成功”

【数据质量】新建规则集名称需进行唯一性校验【上线版本：5.3】​

功能说明：新建规则集时，需要对规则集名称进行重复性校验，若有重复名称，提示“已存在相同规则集名称”

image-2024031411

【数据质量】告警通道配置的校验优化【上线版本：5.3】​

背景：当控制台未设置邮件默认告警通道，在进行质量配置告警/其他通知时不会提示，导致发告警失败

功能说明：配置通知时校验邮件、短信是否有配置告警通道，若未配置提示“短信/邮件未配置告警通道，请先确认告警通道配置完成后再进行通知信息配置。”（涉及模块包含：元数据周期同步告警；元数据实时同步告警；数据质量单表校验、多表校验、规则集告警；数据治理治理任务配置通知、指派人通知；表订阅通知）

image-2024031412

【数据标准】码表管理中导入代码异常提示优化、导入模版更新【上线版本：5.3】​

背景：导入代码时报错提示不明显，模版中有两个 sheet 页，第一个是代码相关，第二个是编码，两个相当于两张前后对应的表，第二个 sheet 页中的代码名称和代码编号要和第一个对应起来才可以正常导入

功能说明：导入代码异常提示优化、导入模版更新

1、若“代码管理”sheet页未填写内容或者必填项未填写，提示为：请完善“代码信息”sheet页信息后再导入。

2、若“编码管理”sheet页未填写内容，提示优化为：请完善“编码管理”sheet页信息后再导入。

3、若代码名称和代码编号两个sheet页存在不一致的情况，提示为：导入表格中“代码管理”“编码管理”两个sheet页中存在代码名称与代码编号不一致的情况，请检查后再导入。点击此处导出错误数据。错误数据中对不一致情况在“编码管理”sheet页进行标红提示

BUGFIX​

【元数据】筛选内容去掉离线任务时，前端需要调后端接口查询下该表关联的表和表的血缘关系【上线版本：5.3】​

背景：当筛选内容去掉离线任务时，表的血缘关系会出现收起状态查询时表血缘丢失或无关表显示等问题

功能说明：前端需要调后端接口查询下该表关联的表和表的血缘关系

【元数据】数据预览从直连 sparkthrift 改为读 hdfs 文件预览【上线版本：5.0】​

背景：thriftserver经常gc导致服务无法正常访问，大量的sql被交给sparkthriftserver执行，导致spark thrift server被打挂重启

功能说明：数据预览需要从直连 sparkthrift 改为读 hdfs 文件预览

【资产盘点】存储资源情况筛选框保留数据源选择状态【上线版本：5.3】​

功能说明：若选择框中已经选择数据源,不论是存储切换为表行数,还是表行数切换为存储，数据源的选择状态都保持不变

image-2024031413

【数据标准】数据拾取中数据标准的引用状态修复【上线版本：5.3】​

背景:数据拾取的时候,数据标准引用至目录后,状态依旧是待引用状态

功能说明:可重复多次引用,但引用后状态变为已引用

image-2024031414