-
公开(公告)号:CN119396745A
公开(公告)日:2025-02-07
申请号:CN202411297141.4
申请日:2021-09-23
Applicant: 华为技术有限公司
IPC: G06F12/0862 , G06F12/0877 , G06F18/23
Abstract: 本申请实施例提供一种数据预取方法、计算节点和存储系统,所述方法包括:计算节点获取第一应用在预设时段内对存储节点的访问信息;计算节点基于所述访问信息确定预取数据的信息;计算节点根据所述预取数据的信息确定预取所述预取数据的缓存节点,并生成预取所述预取数据的预取请求;计算节点发送所述预取请求至所述缓存节点。所述缓存节点响应于所述预取请求执行对所述预取数据的预取操作。本申请实施例提供的方案提高了预取准确性。
-
公开(公告)号:CN113485636B
公开(公告)日:2023-07-18
申请号:CN202110394808.2
申请日:2017-08-10
Applicant: 华为技术有限公司
IPC: G06F3/06
Abstract: 本申请实施例公开了一种数据访问方法、装置和系统,涉及存储技术领域。该方法应用于存储系统中的第一存储节点,第一存储节点通过交换机与主机和存储系统中的至少一个第二存储节点连通,至少一个第二存储节点所包括的物理盘映射为第一存储节点的虚拟盘。该方法可以包括:接收第一写请求,第一写请求携带第一待写数据;对第一待写数据进行条带化,得到条带化数据;并将条带化数据写入第一存储节点的物理盘和/或虚拟盘;记录条带化数据的写入位置。该技术方案可以例如但不限于应用于包含NVMe SSD的存储系统。
-
公开(公告)号:CN114116150A
公开(公告)日:2022-03-01
申请号:CN202010863887.2
申请日:2020-08-25
Applicant: 华为技术有限公司
Abstract: 本申请提供了一种任务调度方法,应用于包括多节点的异构系统,待执行的任务包括至少一个异构API调用,该方法包括:根据异构API调用的参数规模值,确定异构API调用的调度参考信息。该调度参考信息用于描述异构系统中多种处理引擎的执行效率。然后,根据调度参考信息,从异构系统可用的处理引擎中确定执行效率满足预设条件的目标处理引擎,将异构API调用调度到对应的目标处理引擎。该方法支持根据异构API调用的参数规模值选择合适的处理引擎,将异构API调用调度到上述合适的处理引擎上执行,提高了异构API调用的执行效率,进而提高了任务的执行效率。
-
公开(公告)号:CN107209644B
公开(公告)日:2020-04-28
申请号:CN201680003110.0
申请日:2016-10-25
Applicant: 华为技术有限公司
IPC: G06F3/06
Abstract: 一种数据处理方法以及存储装置,所述数据处理方法包括:NVMe存储器接收主机发送的NVMe写命令,所述NVMe写命令中携带key和value指针,所述value指针指向第一存储空间,所述第一存储空间用于存储value;所述NVMe存储器从所述NVMe写命令中获得所述key以及获得value长度,按照所述value长度为所述value分配第二存储空间,所述第二存储空间在所述NVMe存储器中;所述NVMe存储器从所述主机获得所述value,把所述value保存在所述第二存储空间中。
-
公开(公告)号:CN106933775A
公开(公告)日:2017-07-07
申请号:CN201710044364.3
申请日:2013-10-29
Applicant: 华为技术有限公司
IPC: G06F15/173 , H04L29/08
CPC classification number: G06F13/4282 , G06F3/061 , G06F3/0611 , G06F3/0655 , G06F3/0673 , G06F12/10 , G06F13/10 , G06F13/28 , G06F13/4022 , G06F13/4221 , G06F2212/1016 , G06F15/17331 , H04L67/1095
Abstract: 本发明实施例提供了一种数据处理系统和数据处理方法。通过获取数据请求的MMIO地址,该MMIO地址能够直接获取PCIe存储设备中存储的数据,网络适配器根据该MMIO地址,能够直接从所述数据处理系统的PCIe存储设备中读取数据并传送给第二数据处理系统,或将从所述第二数据处理系统接收的数据直接写入所述PCIe存储设备中。使得所述处理系统能够实现在网络通信的两个数据处理系统间传递数据时,数据的传输从PCIe存储设备直接到网络适配器之间传递,不需要经过内存。降低了在两个数据处理系统件传递数据时对内存、CPU等资源的占用率,并提高了数据传输的效率。
-
公开(公告)号:CN101686119A
公开(公告)日:2010-03-31
申请号:CN200810211771.X
申请日:2008-09-23
Applicant: 华为技术有限公司
Abstract: 本发明公开一种单板间通信的方法、装置、以及系统,涉及通讯领域,为提高单板间管理通道通信的可靠性的技术问题而设计。所述方法包括:使用主用管理通道传输管理信息;从主用管理通道切换到备用管理通道;使用备用管理通道传输管理信息。所述系统包括:至少两个单板,所述单板包括:主用管理通道,用于传输管理信息;切换单元,用于从主用管理通道切换到备用管理通道;备用管理通道,用于传输管理信息。本发明可应用于单板间通信。
-
公开(公告)号:CN100440805C
公开(公告)日:2008-12-03
申请号:CN200610063507.7
申请日:2006-11-06
Applicant: 华为技术有限公司
Abstract: 本发明公开了一种ATCA中JTAG器件远程维护的方法及系统,所述的方法包括如下步骤:a、机框管理板与高性能通讯计算架构ATCA单板进行信息交互,将其存储的目标文件加载到所述的ATCA单板的联合测试行动小组JTAG器件或者JTAG链中,完成对所述的JTAG器件或者JTAG链的扫描和加载。采用本发明的技术方案,可以实现BMC模块JTAG器件的远程维护,同时还可以实现单板业务部分所有JTAG器件的远程维护,包括JTAG链上器件的扫描和升级软件的加载。
-
公开(公告)号:CN119149218A
公开(公告)日:2024-12-17
申请号:CN202410980111.7
申请日:2022-06-06
Applicant: 华为技术有限公司
IPC: G06F9/50
Abstract: 公开了融合系统的数据处理方法、装置、设备和系统,涉及数据领域。该融合系统包括计算节点和存储节点。计算节点通过网络与存储节点连接构建了存算分离架构。计算节点的存储介质和存储节点的存储介质经过统一编址构成全局内存池,即计算节点和存储节点共享的全局存储介质。对系统进行读写操作时,获取到处理请求数据,根据内存操作指令对全局内存池进行处理请求数据的内存操作。从而,基于具有全局内存池的存算分离架构既确保计算和存储分别按需灵活扩展,又能够快速地对系统进行读写操作,缩短了端到端的数据处理时长,提升了数据传输速度,降低了系统能耗,改善了系统性能瓶颈。
-
公开(公告)号:CN117251259A
公开(公告)日:2023-12-19
申请号:CN202211001039.6
申请日:2022-08-19
Applicant: 华为技术有限公司
Abstract: 公开了数据处理方法、装置、设备和系统,涉及数据处理领域。方法包括调度器获取到待处理作业,根据待处理作业的资源需求控制至少一个超节点,基于超节点的全局内存池处理待处理作业。其中,待处理作业为与分布式应用相关的处理请求。如此,由于全局内存池为由超节点内节点的存储介质经过统一编址构成的超节点内节点共享的资源。超节点内通过高速互连技术进行连接的节点共享访问该全局内存池,对待处理作业进行处理,从而避免超节点内的节点间基于MPI进行通信,简化了节点运行的应用的编程模型,有效地减少了节点间的I/O通信,充分发挥超节点的性能。从而有效地缩短了数据处理时长以及降低系统能耗,提升系统性能。
-
公开(公告)号:CN116069739A
公开(公告)日:2023-05-05
申请号:CN202111583902.9
申请日:2021-12-22
Applicant: 华为技术有限公司
IPC: G06F16/172 , G06F16/182 , G06Q30/0201
Abstract: 公开了数据处理方法、装置、设备和系统,涉及大数据领域。控制设备用于控制计算设备执行大数据分布式处理。计算设备配置有多种部署模式的存储介质,多种部署模式的存储介质包括计算设备内的本地存储介质、基于本地存储介质组成的全局存储介质、扩展的全局存储介质和扩展的本地存储介质中至少两个。所述方法包括控制设备获取到大数据业务的业务请求,从多种部署模式的存储介质中确定至少一种部署模式的存储介质,向计算设备发送控制指示,指示计算设备对业务请求包括的业务数据执行大数据分布式处理中映射(map)任务,并将得到的中间数据存储到至少一种部署模式的存储介质。从而,减少用于存储中间数据而占用计算设备内存储介质的存储空间。
-
-
-
-
-
-
-
-
-