公开(公告)号：CN107483364A

公开(公告)日：2017-12-15

申请号：CN201610404404.6

申请日：2016-06-08

Applicant: 国家计算机网络与信息安全管理中心

Inventor： 徐晓燕 ,  樊鑫鑫 ,  臧天宁 ,  李高超 ,  周渊

IPC: H04L12/917

CPC classification number: H04L47/76

Abstract: 本发明公开了一种Hadoop Yarn网络带宽资源调度、隔离方法和装置。该调度方法在RM侧执行，包括：接收AM发送的作业资源请求；所述工作资源请求包括：在作业中，每个任务的网络带宽资源需求量；根据每个所述任务的网络带宽需求量，采用预设的公平调度算法，为每个所述任务对应分配容器；其中，在每个所述容器中封装有对应任务的网络带宽资源分配量。该隔离方法在NM侧执行，包括：从AM获取多个容器；其中，每个所述容器中封装有对应的任务的网络带宽资源分配量；根据各个任务的网络带宽资源分配量，隔离各个任务占用的网络带宽资源。本发明在Yarn集群中增加了对网络带宽资源的调度，而且可以避免各个任务之间由于网络带宽资源的竞争而相互干扰。