2025年9月更新日志
上线时间：2025-9
数据开发
新增业务流程类型【6.3】
背景：在离线开发场景中，部分业务逻辑往往跨越多个独立的工作流实现。 当这些工作流中的关键任务存在依赖关系，或多个工作流共同构成完整业务链路时，传统工作流仅聚焦单一数据处理链路，难以满足以下需求：
- 任务整合不足：分散在不同工作流中的任务无法统一管理；
- 依赖关系复杂：跨工作流的依赖配置不直观，维护成本高；
- 缺乏整体监控视角：难以从业务层面把控整体链路运行状态。
因此，为解决上述痛点，系统需引入“业务流程”这一新的调度管控单元，用于在业务层面整合多个工作流及其任务，实现跨工作流的任务编排、依赖管理与统一调度。
功能：业务流程是一个以业务场景为核心的任务编排与调度单元，支持对多个工作流中的相关任务进行集中管理与调度执行。 核心功能包括：
- 任务整合与业务视图
- 将分散在多个工作流中的相关任务统一纳入同一业务流程管理。
- 自动形成可视化的业务链路视图，清晰展示任务间的业务逻辑关系。
- 跨流程依赖配置
- 支持任务之间、任务与业务流程之间的灵活依赖配置。
- 可实现跨业务流程的依赖管理，满足复杂业务链路调度需求。
- 调度与运行能力
- 流程下的任务可独立配置调度策略，无需配置根节点即可直接提交。
- 最终以“流程下的单个任务”为调度运行维度，实现灵活高效的执行控制。
- 补数据能力
- 支持流程内任务的统一或独立补数操作，确保业务链路数据一致性。
数据同步向导模式支持kafka2.x【6.0】
背景：业务数据存储在Kafka中，为支持周期调度的T+1报表分析，需提供从Kafka读取数据的能力。
功能：数据同步在源端和目标端均支持选择Kafka 2.x作为读写数据源
python on agent日志实时打印【6.3】
背景：python on agent需等待任务运行完成后才返回日志，导致无法实时查看执行过程，影响问题排查效率
功能：页面运行任务时支持实时打印运行日志，用户可在任务执行过程中实时查看输出信息与错误日志
知识库同步优化【6.3】
背景：目前AI知识库同步耗时较长，生产环境数据常出现同步过程持续一天以上的情况，影响使用体验
功能：同步流程支持并发配置，支持多线程并行同步，加快知识库数据同步速度