Skip to main content

6.3.4更新日志

上线时间：2025-06-13

功能新增​

【数据模型】支持doris2.x类型数据源建表【上线版本：6.3】​

功能：

规范建表功能支持doris2.x类型数据源，支持在建表过程中配置主键表、聚合表、明细表，支持规范表名、生命周期；表结构配置支持根据前置的模型类型选择配置主键、分区支持配置动态分区、范围分区、列值分区。

img

img

【数据安全】数据脱敏功能优化、支持管控离线开发平台【上线版本：6.3】​

1、脱敏规则配置优化：配置规则时支持遮盖、转义、算法加密三种脱敏方式；配置规则生效范围时支持圈定范围人群。

img

img

2、针对hive、doris类型数据源脱敏规则支持应用到离线平台（其他类型暂不支持）。若doris类型若需生效至离线开发平台需要注册udf函数，系统会自动尝试注册，如果权限不足需要手动注册udf函数，平台提供函数包下载入口。

img

【数据资产】对接公共组件，支持水印配置【上线版本：6.3】​

对接公共组件的水印设置功能，支持在下载数据、导出文件、平台页面展示水印（平台页面指的是所有页面）。控制是否展示、展示内容均对接公共管理-水印设置模块。

img

img

【数据资产】相似数据源逻辑优化【上线版本：6.2】​

需求背景：相似数据源问题会导致数据地图存在数据大量重复问题，因此会引发的数据权限配置不统一，以及后续资产-离线数据地图合并之后数据不一致问题。故从资产侧，去除掉相似数据源的逻辑。历史数据保持原状（目前重复数据可以通过删库、删表、取消引入数据源的方式解决）。

需求内容：

1、针对离线、指标、标签生成的meta数据源，针对同一个集群、同一个计算引擎生成的第一个meta数据源为资产默认引入的数据源。

2、后续新增同一个集群、同一个计算引擎的项目，资产不会自动引入新的meta数据源，处理逻辑为将新增的meta对应的schema自动同步到资产，周期同步任务还是单独生成，只不过是针对第一个meta源创建周期同步任务。

3、针对doris多集群配置的情况，也是按照同一个集群、同一个计算引擎生成meta数据源，也就是存在一个项目生成多个meta数据源的情况。

注意：若用户手动引入了其他meta数据源，当作外部数据源处理，不针对手动引入的meta数据源生成自动同步任务。

历史数据：针对已部署客户已经同步进来的数据源不做处理，新增数据源按照本次逻辑处理，若第一个meta数据源不存在，则顺延同步到下一个meta数据源，遍历后均不存在的话，再将当前数据源引入。

img

【数据资产】国际化版本支持【上线版本：6.3】​

数据资产平台支持切换展示语言英文/中文。

img

功能优化​

【数据模型】建表配置优化【上线版本：6.3】​

1、支持控制数据模型能创建的数据源类型，默认仅管理员有配置权限

img

2、建表第一步骤需要选择数据源后再出现存储格式/类型等信息的配置

img

img

3、批量解析之后，针对未匹配到标准的字段支持修改中文名

img

【元数据】元数据周期同步列表优化【上线版本：6.2】​

元数据-周期同步任务列表中支持展示最近一次实例状态。

img

【元数据】元模型-个性模型支持展示添加的应用库列表【上线版本：6.2】​

img

功能下架​

【数据模型】flink建表功能下架【上线版本：6.3】​

flink建表功能从6.3开始下架