-
公开(公告)号:CN104268018B
公开(公告)日:2017-11-24
申请号:CN201410486616.4
申请日:2014-09-22
Applicant: 浪潮(北京)电子信息产业有限公司
Abstract: 本发明公开了一种Hadoop集群中的作业调度方法和作业调度器,该方法包括以下步骤:S1、获取Hadoop集群中的各个资源池的资源使用量,根据各个资源池的资源使用量,选择当前资源池;S2、选择所述当前资源池中任务权重比最小的作业作为当前作业;S3、判断所述当前作业是否是小作业,如果是,则执行步骤S4;否则,执行步骤S5;S4、从所述当前作业中选择一个本地任务,向选择的本地任务分配空闲资源;S5、根据所述当前资源池中的空闲资源的位置以及所述当前作业的等待时间,向所述当前作业分配空闲资源。本发明能够避免将非本地节点的空闲资源资源分配给小作业带来的数据传输延迟和带宽消耗,提高了小作业的运行效率和系统的整体性能。
-
公开(公告)号:CN103761167B
公开(公告)日:2017-04-05
申请号:CN201410032550.1
申请日:2014-01-23
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: G06F11/14
Abstract: 本发明提出了一种实现数据中心备份的方法和装置,包括:根据待备份的数据块所在表名和列族名,确定该数据块在目标数据中心中的存储范围;在确定的存储范围中选取一个数据节点存储数据块。本发明解决了Hbase跨数据中心数据备份时同一列族名的数据块存储分散的问题,使得备份到目标数据中心的同一列族名的数据块存储更加集中,从而提高了读取速度。
-
公开(公告)号:CN106201831A
公开(公告)日:2016-12-07
申请号:CN201610491115.4
申请日:2016-06-28
Applicant: 浪潮(北京)电子信息产业有限公司
CPC classification number: G06F11/327 , G06F11/3027
Abstract: 本发明公开了一种基于linux中PCIE错误事件的收集方法,包括:初始化AER中的错误信息,确定发生错误的目标设备;从所述AER中提取与所述目标设备对应的PCIE错误信息;分析所述PCIE错误信息的错误事件类型及属性信息,根据所述错误事件类型及属性信息,将所述PCIE错误信息整合为预定文件格式的PCIE错误事件,并存储至数据库;可见,在本实施例中,通过从AER提取与目标设备对应的PCIE错误信息,并将PCIE错误信息整合为统一的事件格式,实现了对PCIE错误信息的收集;本发明还公开了一种基于linux中PCIE错误事件的收集系统,同样能实现上述技术效果。
-
公开(公告)号:CN106126364A
公开(公告)日:2016-11-16
申请号:CN201610494538.1
申请日:2016-06-28
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: G06F11/07
CPC classification number: G06F11/0781
Abstract: 本发明公开了一种基于linux系统的内存故障事件收集方法及系统,包括调取内存错误记录寄存器内的错误原始事件数据,并将其发送至mcelog设备进行记录;分析mcelog设备内的错误原始事件数据,提取错误原始事件数据中的关键数据;将关键数据整合为错误事件文件,并将错误事件文件的格式定义为预设错误事件格式后作为内存事件源。本发明能够主动将位于内存错误记录寄存器内的错误原始事件数据进行调取,并通过分析将其中的包含有错误信息的关键数据提取出来,整合为格式统一的错误事件文件,便于后续故障诊断处理时进行识别,可用性强,且提高了故障诊断处理时的便利性。
-
公开(公告)号:CN105429973A
公开(公告)日:2016-03-23
申请号:CN201510762536.1
申请日:2015-11-10
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: H04L29/06
CPC classification number: H04L63/1408
Abstract: 本发明公开了一种网卡流量监控方法及装置,该方法包括:每经过预设时间段,则提取网卡在经过的预设时间段内的接收流量字节数和发送流量字节数;由发送流量字节数中减去接收流量字节数,得到目标差值;判断目标差值是否大于预设阈值,如果是,则确定存在恶意程序。其中,接收流量字节数对应于下载速度,发送流量字节数对应于上传速度,因此,在目标差值大于预设阈值时,说明其上传速度在一定程度上大于下载速度,此时,确定计算机存在恶意程序。可见,本申请提供的一种网卡流量监控方法及装置通过对网卡流量的监控,能够在操作简便的同时,有效判断出计算机是否存在恶意程序,进而保证计算机和网络的安全连接。
-
公开(公告)号:CN105243011A
公开(公告)日:2016-01-13
申请号:CN201510571947.2
申请日:2015-09-09
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: G06F11/36
Abstract: 本发明提供一种内存泄露定位方法及装置。该方法,包括:获取文件信息和内存地址信息,所述文件信息包括触发分配内存的文件名称和文件行号,所述内存地址信息包括指向所分配内存的指针值信息,所述分配内存包括为所述文件行号指示的文件所分配的内存,所述文件行号为所述文件名称指示的文件的行号;将所述文件信息和所述内存地址信息存储在数据结构中,用于在发生内存泄漏时确定内存泄漏的位置。实现了对分配内存的定位,从而可以在发生内存泄漏时,根据分配内存的定位信息,确定内存泄漏的位置。
-
公开(公告)号:CN105243003A
公开(公告)日:2016-01-13
申请号:CN201510572104.4
申请日:2015-09-09
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: G06F11/30
Abstract: 本发明提供一种内存分配的监测方法及装置。该方法,包括:获取文件信息和内存信息,所述文件信息包括触发分配内存的文件名称和文件行号,所述内存信息包括为执行所述文件行号指示的文件所分配的内存信息,所述文件行号为所述文件名称指示的文件的行号;根据所述文件信息和内存信息,确定所述文件行号指示的文件占用的内存总量。实现了对程序运行的过程中内存占用量的实时监测,从而避免了内存泄漏,进而减少了系统崩溃的几率。
-
公开(公告)号:CN104991816A
公开(公告)日:2015-10-21
申请号:CN201510358596.7
申请日:2015-06-25
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: G06F9/46
Abstract: 本发明提供一种进程调度方法及装置,上述方法包括以下步骤:预设实时进程优先级并将不同优先级的实时进程放入对应的工作队列;根据所述工作队列中的实时进程截止时间、实时进程运行时间,按照预设进程顺序调整策略,调整所述工作队列中各个实时进程执行顺序;实现了将实时进程优先级与实时进程截止剩余时间结合起来,安排实时进程执行顺序,大大提升了实时进行的执行效率。
-
公开(公告)号:CN104239479A
公开(公告)日:2014-12-24
申请号:CN201410449140.7
申请日:2014-09-04
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: G06F17/30
CPC classification number: G06F17/30705
Abstract: 本发明公开了一种文档分类方法和系统,应用于包括Map程序和Reduce程序的Hadoop集群中,所述方法包括以下步骤:所述Map程序对训练文档和待分类文档进行解析,根据解析结果确定特征属性,并对所述特征属性进行划分;所述Map程序根据所述训练文档的特征属性以及对所述训练文档的分类结果,生成分类器;所述Reduce程序使用所述分类器对所述待分类文档进行分类,得到待分类文档的分类结果。本发明充分利用了Hadoop集群的分布式特点,避免了传统系统框架的局限性,具有并行快速的特点,能够快速实现对海量文档的分类,节省了分类时间,提高了文档分类的效率,提高了系统性能。
-
公开(公告)号:CN104156457A
公开(公告)日:2014-11-19
申请号:CN201410409929.X
申请日:2014-08-19
Applicant: 浪潮(北京)电子信息产业有限公司
IPC: G06F17/30
CPC classification number: G06F17/30864
Abstract: 本发明公开了一种基于MapReduce框架的网页排序方法和系统,应用于Hadoop集群中的MapReduce框架,MapReduce框架包括Map模块和Reduce模块,Map模块从文本文件中读取与各个网页对应的数据记录,根据读取到的数据记录,生成并保存与各个网页对应的链接信息、积分信息和出度信息;Reduce模块根据与各个网页对应的链接信息和出度信息,更新各个网页的贡献积分,并在满足预设的收敛条件时,将网页排序结果输出,提升了网页排序的效率,且保证网页排序的准确性。
-
-
-
-
-
-
-
-
-