2023年9月更新日志
上线时间:2023-09
数据开发
GitLab代码同步功能优化【6.0】
背景:GitLab代码同步功能上线后,客户针对GitLab代码同步功能提出了部分优化意见,数栈进行了完善。
功能:
1、适配GitLab版本15.7.8
2、项目拉取改为异步操作,防止拉取超时
3、任务推送从“保存后再推送"修改为“推送完成后再保存”
4、支持按照任务目录拉取
5、按文件类型选择时,修改为选填
6、批量操作希望支持批量推送和拉取
SQL查询结果优化【6.0】
1、离线元数据同步支持视图同步
离线数据源页面的元数据同步功能,支持元数据同步同步视图
2、支持数据源本地数据导入
3、查询返回行数
4、查询结果支持排序
5、查询结果表名标识字段类型标记
调度周期为月时,支持选择最后一天【5.3】
功能:调度周期为“月”时,时间支持选择“每月最后一天”
inceptor读取支持范围分区【5.3】
背景:在数据同步中,离线inceptor读取不支持范围分区(Range Partitioning),仅支持了单值分区(Single-Value Partitioning)
功能:在离线数据同步选择inceptor数据源读取时,支持选择范围分区
文件拷贝任务优化【5.3】
es写入支持前置后置语句【5.3】
发布管理
任务发布对接审批中心【6.0】
背景:部分客户对任务发布至生产项目的安全性要求较高,希望能够审批后再完成发布。
功能:开启发布审批流程后,在离线执行发布动作后,审批人需要先在审批中心进行审批后,发布流程才可继续进行。
在项目中进行发布后,如下图,会提交至审批中心审批
审批中心
项目管理
项目支持绑定数据库账号【6.0】
背景:通常客户遇到这样的场景,不同的项目由不同的团队负责,对应的数据权限也不同,因此希望能够在项目维度去进行数据库账号的绑定
功能:RDB类的数据库账号支持在项目中进行设置。在控制台还可设置集群、个人层面的数据库账号,这三者间的优先关系是个人>项目>集群