公开(公告)号：CN105302536A

公开(公告)日：2016-02-03

申请号：CN201410373376.7

申请日：2014-07-31

Applicant: 国际商业机器公司

Inventor： 邹嘉 ,  史巨伟 ,  郑勇 ,  王晨 ,  刘杰

IPC: G06F9/44

CPC classification number: G06F16/182

Abstract: 本发明涉及分布式文件系统，其提供了一种MapReduce应用的相关参数的配置方法和装置，该方法包括：接收第一MapReduce作业的处理请求；获取历史MapReduce作业的作业特征属性；从所述历史MapReduce作业的作业特征属性中查找到与所述第一MapReduce作业相关的第二MapReduce作业的作业特征属性；以及根据所述第二MapReduce作业的作业特征属性配置所述第一MapReduce作业的相关参数。按照该参数配置方法，能够有效地降低文件传输的网络开销、尽可能实现本地化处理的MapReduce作业的参数配置方法，减少管理员配置负担的同时，有效地增加系统资源利用率。