6.1.6更新日志
上线时间:2024-03-31
功能新增
【元数据】新增同步状态“等待同步”【上线版本:5.3】
功能说明:
1、元数据周期同步增加同步状态“等待同步”,当周期同步任务存在待同步任务,且没有开始同步时,状态展示为“等待同步”;
2、支持通过筛选查询同步状态。
【元数据】同步全部内容/除去表行数和存储的全部内容功能新增支持数据源【上线版本:5.3】
功能说明:
元数据周期同步时,可选择同步全部内容/除去表行数和存储的全部内容功能新增支持mysql、oracle、sql server、tidb、greenplum、adb postgresql、starrocks、hashdata、oushudb,针对其他类型数据源,不显示“元数据临时同步内容”选择模块。
【数据模型】编辑表操作对接审批中心,实现审批流程标准化【上线版本:6.2】
功能说明:
数据模型—数据建表/删表/编辑表操作对接审批中心,实现审批流程标准化。
- 【数据资产】针对无数据模型审批权限的用户,在进行数据表的新增、编辑、删除操作时,均需要进行审批,审批动作统一在审批中心进行操作,数据资产保留了用户可在“我的模型”模块查看审批进度、撤回操作。
- 【审批中心】需要新增“数据模型申请”流程,审批人可做通过/驳回操作。针对数据资产中撤回的模型申请,审批中心的“待审批”模块不再展示此条申请数据。
- 【历史数据迁移】历史数据迁移到审批中心留存。
【数据治理】支持健康资产分权重调整【上线版本:6.2】
背景:
目前资产健康分还不支持用户自定义,增加自定义功能,可以让客户自己调整健康分的权重占比,更好的让用户对在意的数据实现针对性的管控。
功能说明:
增加支持资产健康分权重配置,展示扣分规则
【数据质量】新增支持starrocks2.x、3.x数据源【上线版本:6.2】
功能说明:
数据质量模块新增支持starrocks2.x、3.x数据源,包含单表校验(需要支持所有校验函数)、多表比对、规则集校验、表质量评分等质量相关的所有功能模块。
【数据安全】数据分级分类应用【上线版本:6.2】
功能说明:
1、级别管理
- 支持按照用户赋予等级,默认提供L1~L5共5个用户等级,管理员可通过“编辑”按钮修改用户等级(默认级别对应的开放用户等级为L1,可通过编辑操作进行修改。若有的用户没有配置用户等级信息,则无等级用户不受分级分类的权限管控);
- 编辑按钮增加悬浮提示优化,增加【申请权限】按钮
2、数据地图涉及模块
- “数据地图”数据表数据预览时,列表中展示字段右侧新增分级分类的标识;
3、角色管理模块
- 针对“数据分级—级别管理—操作”的权限,默认只给管理员开放,数开和访客无此权限;针对页面上的“申请权限”按钮,跟随用户等级的配置控制是否显示,不受角色的权限管控。
4、审批中心
- 支持管理员在审批中心对分级权限的申请进行审批
功能优化
【元数据】血缘分析报错优化【上线版本:5.3】
功能说明:
血缘分析模块,点击“添加数据库”时,当某数据源下面的全部数据库均已添加,勾选“全量数据库”则报错,优化为提示“xxx数据源下所有的数据库均已添加至血缘监控,无可添加项。”
【元数据】优化adb类型血缘解析由于识别数据表名大小写不敏感导致解析失败的问题【上线版本:6.0】
功能说明:
发现针对adb类型的血缘解析,识别数据表名的时候针对大小写不敏感导致血缘解析存在无法解析出来的情况(大写字母会识别成小写字母),针对这种场景进行优化处理,能够准确识别表名大写/小写,从而准备解析血缘信息。
【数据治理】小文件治理优化,支持选择local模式/remote模式【上线版本:5.3】
功能说明:
1、小文件治理后端处理逻辑优化;
2、在进行周期治理/单次治理时,支持选择local模式/remote模式;
3、针对新增的remote模式支持中途取消操作。
【数据治理】小文件治理编辑治理规则支持分页查询【上线版本:5.3】
功能说明:
小文件治理针对分区表,查看分区时支持分页查询。
【数据质量】质量规则配置支持以数据源、数据库、数据表的形式进行选择【上线版本:6.2】
功能说明:
1、数据质量中进行配置单表校验/多表比对规则需要支持选择数据源-数据库(schema)-数据表,而非目前的数据源-数据表形式;
2、在创建质量规则时支持选择脏数据存储库是否为默认存储数据库。
【平台管理】移除用户判断交接状态,支持校验表负责人【上线版本:6.0】
功能说明:
在移除用户时判断是否进行交接中,需要支持校验原用户是否有负责表(也就是数据表的负责人为原用户),若有,需要提示需要进行权限交接,交接后表负责人自动变更为转让人用户。
【数据质量】多表对比规则“关联任务”提示内容优化【上线版本:5.2】
功能说明:
多表对比规则没有强弱规则的配置区分,针对配置规则第四步骤中的“关联任务”提示内容进行优化。
BUGFIX
【元数据】元数据同步时没有可同步的表,同步结束后状态为“同步完成”【上线版本:5.2】
说明:如果元数据同步时没有可同步的表,比如所选库下没有表,或者通过过滤条件之后,没有其他表,那么同步结束后的状态应该为“同步完成”。