-
公开(公告)号:CN117076058A
公开(公告)日:2023-11-17
申请号:CN202210500533.0
申请日:2022-05-09
Applicant: 华为技术有限公司
Abstract: 一种线程数调整方法及装置,本申请中,计算系统对机器学习模型训练。机器学习模型训练中一次迭代需并发的执行多个分支任务。调整装置对每个分支任务的线程数进行多次调整。具体到一次调整,获取该次调整对应一个候选线程数组合,候选线程数组合包括每个分支任务在本次调整时对应的线程数。利用候选线程数组合调整每个分支任务的线程数。每次调整之后,获取计算系统的性能参数值。在经过N次调整之后,得到多个性能参数值。从多个性能参数值选择目标性能参数值,用目标性能参数值对应的候选线程数组合调整每个分支任务的线程数。基于性能参数值选择的候选线程数据组合使计算系统的性能优势得到较大程度的展示,提升计算系统执行效率。
-
公开(公告)号:CN119449799A
公开(公告)日:2025-02-14
申请号:CN202310947384.7
申请日:2023-07-28
Applicant: 华为技术有限公司
IPC: H04L67/1001 , H04L67/146 , H04L61/45
Abstract: 公开了一种数据通信的管理方法、计算集群和服务器,涉及通信技术领域。针对于工作节点从服务节点获取数据的过程,管理节点会将数据的标识进行映射,如管理节点生成数据的源标识对应的目标标识,并由该目标标识所归属的服务节点来读取数据。在各工作节点所要拉取的数据总量不变的情况下,各工作节点从各服务节点拉取数据的总通信次数不变,管理节点将原来属于不同服务器的工作节点和服务节点之间的通信更新为:工作节点和同属于一个服务器中的服务节点之间的通信,有利于减少工作节点需要跨服务器从目标服务节点获取数据的通信次数,避免数据通信过程中的长尾现象,从而提高工作节点获取数据的效率,减少计算集群执行任务的时长。
-
公开(公告)号:CN117811955A
公开(公告)日:2024-04-02
申请号:CN202211217588.7
申请日:2022-09-30
Applicant: 华为技术有限公司
Inventor: 吕江东
Abstract: 本申请公开了确定网络状态的方法、设备及计算机可读存储介质,属于通信技术领域。在该方法中,先通过虚拟端口接收用于确定网络状态的数据包,确定虚拟端口对应的协商进程,从而通过该协商进程确定用于传输数据包的物理端口,再通过物理端口将数据包传输至物理端口连接的网络,则传输的数据包能够用于确定该网络的网络状态。本申请新增了一种协商进程,该协商进程占用的内存较小,启动速度较快。通过该协商进程可以确定物理端口,从而可以通过物理端口传输通过虚拟端口接收的数据包,使得基于传输的数据包确定网络状态成为可能。
-
-