Skip to main content

StreamWorks 6.2.0更新日志

发布时间：2024-03-29​

新增​

实时数据源-hivemetastore被Catalog应用关系优化【6.2】​

  • 背景: 数据源中心新增hivemetastore数据源被实时湖仓HMSCatalog应用关系展示
  • 说明:
    • hivemetastore数据源被HMSCatalog引用关系展示
    • Kafka、mysql、oracle等数据源被DTCatalog引用关系展示
    • 数据源中心展示引用关系，被引用数据源不支持取消引入逻辑
      • DTCatalog、HMSCatalog被任务引用关系，修改原先提交后存在关系改为保存则存在引用关系，保存不提交的状态为开发中
      image-image-

湖仓表创建提示修改并添加相关的提示跳转至帮助文档【6.2】​

  • 背景: 湖表管理创建表添加产品开发过程中已知问题，提高数据开发效率
  • 说明:

    • 将主键缺失报错信息、SQL Query batch模式读取分区表报错、建表支持仅写表名等问题添加在帮助文档

    • 提示中添加帮助文档地址链接

      image-

湖仓表被应用后，通过湖表详情应用任务跳转至相对应的任务【6.0】​

  • 背景: 湖仓表被任务引用存在关系时，支持通过表详情引用任务跳转到相对应的数据开发任务详情页面
  • 说明:

    • 表管理-任务详情-任务引用关系存在支持数据开发任务详情跳转

    • 支持不同任务状态的展示，状态根据调度状态展示，跳转任务详情不区分任务状态，统一跳转数据开发-任务详情

      image-

实时湖仓-表管理优化【6.0】​

  • 背景: 表管理优化选择Catalog或Database时跳转创建表自动带上已选择的Catalog、Database信息

  • 说明:

    • 表管理选择DTCatalog时展示创建映射表、反之选择HMSCatalog时则展示创建湖表

    • 表管理选择Catalog、Database时创建表则自动带上Catalog和Database信息进入键表页面提前做好筛选。不选择Catalog和Database则按照原先逻辑不做自动选择。

      image- image-

实时计算IDE 顶部 Tab支持右键快捷操作【6.2】​

  • 背景: 数据开发IDE顶部Tab支持右键快捷操作

  • 说明:

    • 右键支持关闭、关闭其他、关闭左右标签页、关闭已保存、全部关闭

      image-

数据开发 IDE 编辑器快捷键 支持中文【6.0】​

  • 背景: 数据开发IDE编辑器快捷键支持中文

  • 说明:

    • 数据开发IDE编辑器快捷键支持中文

      image-

实时湖仓-湖表paimon运行时metric数据【6.0】​

  • 背景: FlinkSQL使用Paimon数据源创建任务，运行中状态输入输出RPS等数据信息展示

  • 说明:

    • Paimon数据源输入输出RPS、TPS、脏数据等数据曲线

    • 运行信息vertex拓扑图展示输入输出数量信息

      image- image-

SQL Query 批模式查询Paimon表优化参数配置主键【6.0】​

  • 背景: SQL Query 批模式查询属于高频操作，频繁切换表需要同步修改主键导致开发任务使用困难

  • 说明:

    • 解析SQL中表的主键通过后端自动加主键信息附带在环境参数中不需要手动更换

      image-

优化​

「前端性能」改造项【6.2】​

  • 背景: 前端页面性能改造
  • 说明:
    • 首屏加载性能改造

性能优化 湖仓管理-查询Table性能优化【6.0】​

  • 背景: 湖仓管理-湖表查询Table性能优化

  • 说明:

    • 当前使用两种API查询方式：HMS API查询、Mysql元数据存储查询方式

    • 优先使用Mysql元数据存储查询方式，尝试失败后使用原有的HMS API查询方式

    • 优化表管理-表查询列表、表详情性能

      image-

产品优化 角色权限点控制【6.2】​

  • 背景: 产品历史功能模块角色权限控制

  • 说明:

    • 湖仓管理、Topic管理、首页Demo、项目管理模块权限收拢

      image-