-
公开(公告)号:CN114465941A
公开(公告)日:2022-05-10
申请号:CN202210383737.0
申请日:2022-04-13
Applicant: 之江实验室
Abstract: 本发明公开了一种基于收发包协同的集群计算流量仿真方法、系统与装置。本发明采用有向无环图对集群计算的计算过程和通信过程进行建模,可由用户按需定义计算阶段和通信阶段的数据特征,同时本系统支持在用户设定的约束条件下批量生成实验样本,包括有向无环图及其通信特征的生成。此外,本发明基于发包器和收包器的协同机制,定义流量传输协议,除生成符合数据特征的流量数据外,还可以实现动态的仿真任务调度,在保证实验效率的同时,更加真实的模拟了集群计算流量在网络中的传输过程。
-
公开(公告)号:CN114157724A
公开(公告)日:2022-03-08
申请号:CN202111393426.4
申请日:2021-11-23
Applicant: 之江实验室
Abstract: 本发明涉及计算机网络技术领域,尤其是涉及一种基于源路由的身份/位置标识混合转发方法,包括了一种基于MobilityFirst协议扩展头的报文格式、一种基于身份标识的源路由转发机制和一种基于位置标识的源路由转发机制。通过本发明的上述方法,可以在MobilityFirst网络的接入域中采用基于身份标识的源路由转发机制实现域内网络的互联网,在核心域中基于位置标识的源路由转发机制实现域间网络的互联互通,极大地简化了MobilityFirst网络数据平面的处理流程,同时保留了身份标识与位置标识分离的设计,有效支持域内和域间移动的数据转发。
-
-
公开(公告)号:CN117319287A
公开(公告)日:2023-12-29
申请号:CN202311585505.4
申请日:2023-11-27
Applicant: 之江实验室
Abstract: 本发明公开了一种基于多智能体强化学习的网络可扩展路由方法与系统,通过PageRank算法对网络节点重要性进行建模,并选取网络中的关键节点,然后在若干个关键网络节点上训练Actor网络,在SDN控制器上训练Critic网络,基于多智能体强化学习进行网络流量的逐跳路由,实现大型数据中心网络的可扩展路由。通过本发明既提升了路由方案的稳定性又降低了大型网络中路由寻优的复杂度;同时不需要传统监督学习方法中的带标签的样本,通过与环境反复交互获得实时反馈的样本,以指导模型的迭代和优化;奖励函数的设计综合考虑了网络链路的吞吐量、时延和丢包率,通过多种指标加权指导多智能体生成最优的流量路由策略。
-
公开(公告)号:CN117319283A
公开(公告)日:2023-12-29
申请号:CN202311047597.0
申请日:2023-08-17
Applicant: 之江实验室
Abstract: 本发明提供了一种融合地理分布式机器学习多维特征的梯度传输方法,包括:由全局调度器收集分散在不同地理位置的多维特征,生成计算调度任务,并将计算结果转化为调度策略分发至网络节点和计算节点;由网络节点接收全局调度器发送的调度策略,根据调度策略更新路由转发表,并由计算节点接收全局调度器发送的端到端调度策略,并根据策略执行传输调度。本发明在链路带宽资源动态变化和拓扑结构非对称的广域网场景下,如何利用不同参数更新对模型收敛重要度的差异性以及模型训练对不完整参数更新的容忍性,并基于此建立传输模型和数学模型将这些特征应用于数据的传输优化设计中实现自适应的传输服务,降低梯度数据的传输完成时间。
-
公开(公告)号:CN117177377A
公开(公告)日:2023-12-05
申请号:CN202311208042.X
申请日:2023-09-19
Applicant: 之江实验室
IPC: H04W72/543 , G06N20/20
Abstract: 本发明公开了一种面向分布式训练的协作式梯度网内聚合调度方法和装置。其中,该方法,包括:根据收集到的网络资源信息和预定义的模型分区确定各worker节点上子模型对应的目标聚合节点;根据各worker节点上子模型对应的目标聚合节点,将各worker节点上划分得到的子模型训练后的梯度分片进标记;当梯度分片到达聚合节点时,将聚合节点的标识与梯度分片的标记进行比对,若不匹配则进行转发;若匹配,则将梯度分片分配到当前聚合节点特定的内存单元进行聚合;PS节点进行全局聚合,并将全局聚合后更新的参数发送至所有worker节点。本发明的技术方案,通过协作网内聚合执行梯度调度,实现了在可编程交换机上聚合异步到达的梯度并加速分布式训练。
-
公开(公告)号:CN116232849A
公开(公告)日:2023-06-06
申请号:CN202211659106.3
申请日:2022-12-22
Applicant: 之江实验室
IPC: H04L41/0631 , H04L43/0882 , H04L47/6275
Abstract: 本发明公开了一种基于可编程交换机的流量告警方法、装置、设备及介质,该方法对不同优先级的流量进行监测,当流量大于或等于阈值时,可编程交换机会在数据面进行实时告警,并返回给发送端现网中的低优先级流量信息,发送端可通过告警信息调整任务优先级。本发明使用了可编程交换机的设备,可以在数据面实时地将低优先级流量信息告警给发送端而不必经过控制器,显著降低了告警时延,可以让发送端及时调整发送速率,实现了网络流量的实时调度,在保证高优先级流量传输的同时,提高链路利用率。
-
公开(公告)号:CN115951989A
公开(公告)日:2023-04-11
申请号:CN202310247633.1
申请日:2023-03-15
Applicant: 之江实验室
IPC: G06F9/48 , H04L47/2425 , H04L49/111 , G06F9/50
Abstract: 本发明公开了一种基于严格优先级的协同流量调度数值模拟方法与系统,包括以下步骤:采集分布式计算任务的实时执行状态数据、计算阶段用时估测值;基于严格优先级模拟并存储软件可定义交换机出端口中的流量传输队列;配置无前置依赖任务列表,模拟分布式计算环境中各个计算节点当前在执行的计算任务处理过程,存储待执行的计算任务信息和/或正在执行的计算任务信息;基于分布式计算任务的实时执行状态数据和计算阶段用时估测值,查找符合无前置计算约束条件的计算任务和传输任务;将无前置计算约束条件的计算任务和传输任务分别添加到无前置依赖任务列表和基于严格优先级的传输任务队列中。
-
公开(公告)号:CN114827655B
公开(公告)日:2022-10-11
申请号:CN202210721168.6
申请日:2022-06-24
Applicant: 之江实验室 , 中国人民解放军战略支援部队信息工程大学
IPC: H04N21/232 , G06F16/903 , G06F16/901 , H04L69/22
Abstract: 本发明公开了一种内容存储转发方法及装置、电子设备、存储介质,包括:接收命名数据网络中的兴趣包;将所述兴趣包转发给所述存储节点,以使得所述存储节点根据所述兴趣包中的名字标识的哈希值查找相应的内容,并将所述内容封装成数据包,所述数据包中包含名字标识的哈希值以及与之对应的内容;接收所述存储节点转发的所述数据包;将所述数据包转发至兴趣包端口,所述兴趣包端口为曾经接收包含与所述数据包中内容相对应的名字标识的端口;将另一数据包转发给所述存储节点,以使得所述存储节点解析所述另一数据包中的名字标识的哈希值和内容,并将所述名字标识的哈希值以及对应内容进行存储。该方法兼顾命名数据网络中转发性能与存储性能。
-
公开(公告)号:CN114827655A
公开(公告)日:2022-07-29
申请号:CN202210721168.6
申请日:2022-06-24
Applicant: 之江实验室 , 中国人民解放军战略支援部队信息工程大学
IPC: H04N21/232 , G06F16/903 , G06F16/901 , H04L69/22
Abstract: 本发明公开了一种内容存储转发方法及装置、电子设备、存储介质,包括:接收命名数据网络中的兴趣包;将所述兴趣包转发给所述存储节点,以使得所述存储节点根据所述兴趣包中的名字标识的哈希值查找相应的内容,并将所述内容封装成数据包,所述数据包中包含名字标识的哈希值以及与之对应的内容;接收所述存储节点转发的所述数据包;将所述数据包转发至兴趣包端口,所述兴趣包端口为曾经接收包含与所述数据包中内容相对应的名字标识的端口;将另一数据包转发给所述存储节点,以使得所述存储节点解析所述另一数据包中的名字标识的哈希值和内容,并将所述名字标识的哈希值以及对应内容进行存储。该方法兼顾命名数据网络中转发性能与存储性能。
-
-
-
-
-
-
-
-
-