-
公开(公告)号:CN119917298A
公开(公告)日:2025-05-02
申请号:CN202510421331.0
申请日:2025-04-07
Applicant: 中国空气动力研究与发展中心计算空气动力研究所
Abstract: 本发明属于超级计算机技术领域,公开了一种基于Burst Buffer资源预留的作业调度优化方法,引入了Burst Buffer资源的预留机制,具体包括如下:作业提交与资源需求预留,Burst Buffer资源的预留机制具体包括系统根据每个作业对计算资源和Burst Buffer的需求,提前为其分配相应的Burst Buffer资源;作业调度的时间窗口机制,调度过程采用时间窗口模式;作业执行顺序采用传统方式,并通过比较优化指标作业进一步选择执行的顺序;作业回填;优化目标选择任一或综合的优化目标效果最好的作业执行顺序。本发明在调度过程中提高了作业调度效率和Burst Buffer资源的利用率。
-
公开(公告)号:CN119356626A
公开(公告)日:2025-01-24
申请号:CN202411959130.8
申请日:2024-12-30
Applicant: 中国空气动力研究与发展中心计算空气动力研究所
IPC: G06F3/06
Abstract: 本申请公开了一种作业静态感知条带优化方法、装置、存储设备及介质,涉及计算机优化技术领域,先对离线数据分析,筛选出涉及写操作的作业,统计每条作业在各个OST上的写I/O数据量并进行降序排列,求和得到每条作业的写I/O数据总量,对作业添加属性,标记为待条带化作业,按照应用进行条带化设置,对应用的作业数目进行判断,若应用的作业数目不小于第四阈值则进行子目录条带化设置。针对超级计算机优化作业OST中瞬时负载极不平衡的问题,通过将条带技术应用于存储系统中,通过对作业I/O模式的探索分析,确定可条带优化的作业,此外提出了静态感知文件条带化,能够快速有效的判定可条带化的作业,以适应不同用户的作业分布情况。
-