公开(公告)号：CN118484273A

公开(公告)日：2024-08-13

申请号：CN202310103176.9

申请日：2023-02-10

Applicant: 上海宝信软件股份有限公司

Inventor： 任波 ,  杨淼 ,  郭世平 ,  郑翔 ,  刘政芮 ,  伍治平 ,  成名 ,  王磊

IPC: G06F9/48 ,  G06F9/50 ,  G06F16/21 ,  G06F16/25 ,  G06F16/28

Abstract: 本发明提供了一种基于数据血缘的大数据作业调度系统及方法，包括：作业资源节点管理模块：作业资源节点决定作业模板的分发方向，根据作业模板的作业资源节点类型，分配作业资源节点执行作业实例；作业模板管理模块：构建作业模板，关联作业流模板；作业流模板管理模块：将作业模板根据依赖关系及调度周期一致性划分工作流；作业调度模块：为作业流设置调度任务，运行作业流下的作业模板，接收作业分发模块返回的运行结果；作业分发模块：接收作业调度模块下发的作业实例，将作业下发至作业资源节点；可视化模块：观察作业模板，提供作业重跑和作业补数据。本发明保证业务数据自动、有序的构建。