Skip to main content

2023年9月更新日志

上线时间:2023-09

数据开发

GitLab代码同步功能优化【6.0】

背景:GitLab代码同步功能上线后,客户针对GitLab代码同步功能提出了部分优化意见,数栈进行了完善。

功能:

1、适配GitLab版本15.7.8

2、项目拉取改为异步操作,防止拉取超时

3、任务推送从“保存后再推送"修改为“推送完成后再保存”

4、支持按照任务目录拉取

5、按文件类型选择时,修改为选填

6、批量操作希望支持批量推送和拉取

img

SQL查询结果优化【6.0】

1、离线元数据同步支持视图同步

离线数据源页面的元数据同步功能,支持元数据同步同步视图

img

2、支持数据源本地数据导入

img

3、查询返回行数

img

4、查询结果支持排序

img

5、查询结果表名标识字段类型标记

img

调度周期为月时,支持选择最后一天【5.3】

功能:调度周期为“月”时,时间支持选择“每月最后一天”

img

inceptor读取支持范围分区【5.3】

背景:在数据同步中,离线inceptor读取不支持范围分区(Range Partitioning),仅支持了单值分区(Single-Value Partitioning)

功能:在离线数据同步选择inceptor数据源读取时,支持选择范围分区

文件拷贝任务优化【5.3】

es写入支持前置后置语句【5.3】

发布管理

任务发布对接审批中心【6.0】

背景:部分客户对任务发布至生产项目的安全性要求较高,希望能够审批后再完成发布。

功能:开启发布审批流程后,在离线执行发布动作后,审批人需要先在审批中心进行审批后,发布流程才可继续进行。

img

在项目中进行发布后,如下图,会提交至审批中心审批

img

审批中心

img

项目管理

项目支持绑定数据库账号【6.0】

背景:通常客户遇到这样的场景,不同的项目由不同的团队负责,对应的数据权限也不同,因此希望能够在项目维度去进行数据库账号的绑定

功能:RDB类的数据库账号支持在项目中进行设置。在控制台还可设置集群、个人层面的数据库账号,这三者间的优先关系是个人>项目>集群

img