-
公开(公告)号:CN118890284A
公开(公告)日:2024-11-01
申请号:CN202410891715.4
申请日:2024-07-04
Applicant: 国家电网有限公司信息通信分公司 , 国网山东省电力公司 , 杭州电子科技大学 , 国家电网有限公司
IPC: H04L41/14 , H04L41/16 , H04L45/12 , H04L47/125
Abstract: 本发明涉及算力网络通信技术领域,具体提供了一种面向大模型训练的算力网络通信效率优化方法及装置,包括:基于数据中心之间的双向传输时延,计算出从给定的数据中心出发,遍历完剩余所有数据中心的最短路径;基于最短路径上各数据中心的计算资源量及待训练大模型中各网络层的计算量为各数据中心分配需训练的网络层;采用流水线分片方式控制各数据中心对其划分到的网络层进行并行训练,并在每个批量的样本训练结束后进行负载均衡,直至待训练大模型训练结束。本发明提供的技术方案,有效优化了算力网络在进行大模型训练时的通信效率,提高计算/通信比,从而提高算力网络的资源利用率并加速模型的训练过程。
-
公开(公告)号:CN119538112A
公开(公告)日:2025-02-28
申请号:CN202411605009.5
申请日:2024-11-11
Applicant: 国家电网有限公司信息通信分公司 , 国网山东省电力公司 , 杭州电子科技大学 , 国家电网有限公司
Inventor: 劳铃佳 , 吴杏平 , 闫龙川 , 冯志鹏 , 牛佳宁 , 郭永和 , 蒋从锋 , 刘俊明 , 陈彦琦 , 张攀 , 王洋 , 张宁 , 宋桂林 , 刘雯静 , 蔡心怡 , 赵溪青
IPC: G06F18/243 , G06F9/50
Abstract: 本申请公开了一种资源预测方法、装置、设备及可读存储介质,可应用于人工智能技术领域,该方法包括:获取目标任务对应的元数据;基于所述元数据,利用预设任务分类树对所述目标任务进行分类,并得到目标分类结果;所述预设任务分类树中存储有不同类型任务与不同资源预测模型之间的对应关系;调用与所述目标分类结果对应的资源预测模型对所述目标任务进行资源预测,并得到预测目标数据;所述预测目标数据包括:CPU数量、GPU数量、内存大小以及磁盘空间。如此,基于预设任务分类树确定与目标任务对应的资源预测模型,进而进行资源的预测,提高了资源预测的准确性。
-
公开(公告)号:CN119829293A
公开(公告)日:2025-04-15
申请号:CN202510097021.8
申请日:2025-01-21
Applicant: 国家电网有限公司信息通信分公司 , 国网山东省电力公司信息通信公司 , 杭州电子科技大学 , 国家电网有限公司
Inventor: 袁宇杭 , 吴杏平 , 闫龙川 , 冯志鹏 , 牛佳宁 , 郭永和 , 蒋从锋 , 刘俊明 , 陈雨霏 , 张攀 , 宋新宇 , 刘雯静 , 蔡心怡 , 赵溪青 , 杨庆甫 , 张闻彬
Abstract: 本申请公开了一种面向深度学习作业的异构资源调度方法及相关装置,涉及资源调度领域,包括:根据多个深度学习作业各自的资源需求数据和目标服务器集群的资源使用数据,将多个深度学习作业中需要打包的深度学习作业打包为两两一组的作业对,得到由作业对和/或不需要打包的单个深度学习作业组成的待调度作业集合;根据多个深度学习作业各自的资源需求数据和目标服务器集群的空闲资源数量,预测待调度作业集合中的每个作业对象在GPU和NPU上各自的运行时长,根据每个作业对象在GPU和NPU上各自的运行时长,在目标服务器集群上采用轮次调度机制对待调度作业集合进行资源调度。本申请基于预设的自适应类实现了深度学习任务跨GPU和NPU的异构资源调度的目的。
-
公开(公告)号:CN115577307A
公开(公告)日:2023-01-06
申请号:CN202211255919.6
申请日:2022-10-13
Applicant: 国家电网有限公司信息通信分公司 , 杭州电子科技大学
IPC: G06F18/2431 , G06F18/214 , G06F18/2415 , G06N3/08
Abstract: 本申请公开了一种数据中心的PUE预测方法、装置及存储介质,涉及数据中心能耗领域,用于精确、快速地预测数据中心的PUE。该方法包括:将第一时刻的待预测PUE样本输入到深度森林分类器中进行样本分析,得到分析结果,该分析结果包括N个概率值,每个概率值用于表征待预测PUE样本属于N个预设类别中一个预设类别的概率,N为正整数;基于分析结果、第一历史PUE数据集和第一时刻的环境数据,对RDPG模型训练,得到训练后的RDPG模型,训练后的RDPG模型用于预测数据中心的PUE值。
-
公开(公告)号:CN119540588A
公开(公告)日:2025-02-28
申请号:CN202411486163.5
申请日:2024-10-23
Applicant: 国家电网有限公司信息通信分公司 , 华中科技大学
IPC: G06V10/762 , G06V10/54 , G06N5/01
Abstract: 本发明涉及一种烟火目标检测方法、装置、电子设备及计算机存储介质,属于图像识别技术领域,其中,该烟火目标检测方法包括获取针对同一场景的多张连续帧待识别图像,采用帧间差值法对相邻帧的待识别图像进行处理,确定各待识别图像中的烟火候选像素点,并采用聚类算法对烟火候选像素点进行聚类,确定各待识别图像中的烟火候选区域;提取烟火候选区域的底层统计学特征和纹理特性,并采用决策树对底层统计学特征和纹理特性进行决策,确定烟火目标区域。本发明针对烟火目标快速扩散,相比云雾和灯光具有更多动态信息的特点,使用动态多帧动态追踪方法进行烟火目标的辅助识别,且结合了烟火目标的多维特征,对烟火目标的识别更加准确。
-
公开(公告)号:CN114219983B
公开(公告)日:2024-10-18
申请号:CN202111555642.4
申请日:2021-12-17
Applicant: 国家电网有限公司信息通信分公司
IPC: G06V10/80 , G06V10/82 , G06N3/0464 , G06N3/084
Abstract: 本申请提供了一种神经网络训练方法、图像检索方法及装置,该训练方法通过预先设定的损失函数对第一浅层卷积神经网络、第一深层卷积神经网络、第二浅层卷积神经网络和第二深层卷积神经网络进行训练,使第一浅层卷积神经网络、第一深层卷积神经网络、第二浅层卷积神经网络和第二深层卷积神经网络学习到能提取与图像相似性相关的特征,在此基础上,使用浅层卷积神经网络和深层卷积神经网络提取不同类型的特征,并对特征进行融合,使融合后的特征能表征更加丰富的图像信息,使得利用融合后的特征检索图像,可以提高图像检索的精度。
-
公开(公告)号:CN114374901B
公开(公告)日:2024-04-19
申请号:CN202210023754.3
申请日:2022-01-10
Applicant: 国家电网有限公司信息通信分公司
Abstract: 本申请公开了一种QKD与光接入网融合的通信方法、装置及光网络系统,涉及量子通信领域,可以实现QKD网络的部署,提高光网络的安全性,并且可以提供更多的带宽资源。该光网络系统包括:OLT和至少两组ONU,OLT上部署有至少两个QKD接收装置、第一接收装置、第一发送装置和波分复用器,每组ONU上部署有QKD发送装置、第二接收装置和第二发送装置;至少两个QKD接收装置通过波分复用器、第一光分路器和第二光分路器,与QKD发送装置连接,第一接收装置通过波分复用器、第一光分路器和第三光分路器,与第二发送装置连接,第一发送装置通过第一光分路器和第四光分路器,与第二接收装置连接,使得ONU采用波分复用的方式发送信号,OLT采用时分复用的方式发送信号。
-
公开(公告)号:CN116795198A
公开(公告)日:2023-09-22
申请号:CN202310820570.4
申请日:2023-07-05
Applicant: 国家电网有限公司信息通信分公司
IPC: G06F1/3234 , G06N3/092 , G06F1/20
Abstract: 本申请公开了一种数据中心的能耗优化方法、装置及存储介质,涉及电力运维技术领域,用于优化数据中心的制冷系统的参数,以降低数据中心的能耗。该方法包括:获取数据中心的第一状态信息,该第一状态信息用于表征数据中心当前的状态,状态包括以下至少一项:IT设备负载状态、制冷系统状态、外界环境状态;通过深度强化模型,根据第一状态信息,从数据中心对应的动作空间中选择目标动作,该动作空间中包括多个动作,该动作用于配置数据中心的制冷设备的参数,该深度强化模型是基于动作空间训练得到的。
-
公开(公告)号:CN114676105A
公开(公告)日:2022-06-28
申请号:CN202210317584.X
申请日:2022-03-29
Applicant: 国家电网有限公司信息通信分公司
Abstract: 本发明提供一种日志数据预处理方法及装置,通过对获取的待处理的第一日志文件进行格式转换,得到第二日志文件,为第二日志文件中同类型的错误日志数据分配相同错误标记,得到第三日志文件,基于具有不同错误标记的所有错误日志数据的时间戳和预设序列长度,构建多个故障相关序列,计算所有故障相关序列之间的序列似然度,将序列似然度小于预设值的故障相关序列对划分为一组,得到聚类后的故障相关序列并进行训练,得到对应的故障分类模型。基于上述,对日志数据进行预处理时,能够在减少数据量的基础上保留更多与故障相关的日志数据,有利于后续故障预测过程中更为精准的进行预测各类故障。
-
公开(公告)号:CN119728528A
公开(公告)日:2025-03-28
申请号:CN202411831162.X
申请日:2024-12-12
Applicant: 国家电网有限公司信息通信分公司
IPC: H04L45/12 , H04L45/128
Abstract: 本申请公开了一种互斥路径计算方法、装置及存储介质,涉及电力运维技术领域,用于提高电子设备计算互斥路径的效率和可靠性。该方法包括:获取源节点至目的节点间的第一最短路径,第一最短路径包括M个中间节点,M≥0;基于源节点和M个中间节点,计算得到M+1条备选路径,源节点和M个中间节点中的每个中间节点分别对应一条备选路径;在M+1条备选路径中存在与第一最短路径互斥的路径的情况下,将第一最短路径和与第一最短路径互斥的第一备选路径确定为两条互斥路径;或者,在M+1条备选路径中不存在与第一最短路径互斥的路径的情况下,基于第二备选路径,确定两条互斥路径,第二备选路径为M+1条备选路径中的最短路径。
-
-
-
-
-
-
-
-
-