-
公开(公告)号:CN113094757B
公开(公告)日:2022-02-22
申请号:CN202110629726.1
申请日:2021-06-07
Applicant: 之江实验室
Abstract: 本发明公开了一种面向拟态存储系统的文件碎片系统,在不改变原有存储系统架构的基础上,实现具备内生安全特性的文件碎片方法,在实现现有业务轻量级对接的基础上,可以提升数据的安全性,对于数据篡改和盗取碎片后进行数据雕复的攻击场景具备较强的防御,攻击者无法通过先验知识获取更大攻击效益。本发明在同一数据文件不同备份场景和不同数据文件存储应用场景上都实现了算法的异构化,使得攻击者无法通过先验知识降低数据破解的难度。另外,本发明提出的具有不定长扰码特征的碎片文件命名算法可以在文件碎片级别校验文件的完整性,提升系统的效率。因此,本发明在保证用户读写效率的前提下,提升了数据的安全性。
-
公开(公告)号:CN113518012B
公开(公告)日:2021-12-10
申请号:CN202111058895.0
申请日:2021-09-10
Applicant: 之江实验室
Abstract: 本发明公开了一种分布式协同流量仿真环境构建方法及系统。本发明基于分布式集群计算有向无环图信息、网络环境拓扑信息以及协同流量统计分布数据,生成符合真实计算流量特征的仿真协同流量。采用本方法构建的仿真环境允许用户定义报文结构、网络结构以及作业特征,为用户进行Coflow调度研究提供精准、可控的实验环境。本发明屏蔽了真实计算集群环境中计算任务通信阶段的随机性和复杂性,可按需实现通信环境仿真和流量重放场景,有效支撑了Coflow调度研究的试验和测试工作。
-
公开(公告)号:CN113518012A
公开(公告)日:2021-10-19
申请号:CN202111058895.0
申请日:2021-09-10
Applicant: 之江实验室
Abstract: 本发明公开了一种分布式协同流量仿真环境构建方法及系统。本发明基于分布式集群计算有向无环图信息、网络环境拓扑信息以及协同流量统计分布数据,生成符合真实计算流量特征的仿真协同流量。采用本方法构建的仿真环境允许用户定义报文结构、网络结构以及作业特征,为用户进行Coflow调度研究提供精准、可控的实验环境。本发明屏蔽了真实计算集群环境中计算任务通信阶段的随机性和复杂性,可按需实现通信环境仿真和流量重放场景,有效支撑了Coflow调度研究的试验和测试工作。
-
公开(公告)号:CN112364945A
公开(公告)日:2021-02-12
申请号:CN202110037237.7
申请日:2021-01-12
Applicant: 之江实验室
Abstract: 本发明公开了一种基于域‑不变特征的元‑知识微调方法及平台,该方法学习同类任务不同数据集上高度可转移的共有知识,即域‑不变特征,微调网络集中学得同类任务不同数据集对应的不同域上的共同域特征,快速适应任何不同的域。本发明提升了同类任务通用语言模型的参数初始化能力和泛化能力,最终微调得到同类下游任务语言模型的通用压缩架构。在元‑知识微调网络中,本发明设计域‑不变特征的损失函数,学习与域无关的通用知识,即最小化一个域‑不变特征的学习目标来驱动语言模型具有域‑不变特征的编码能力。
-
公开(公告)号:CN117319287B
公开(公告)日:2024-04-05
申请号:CN202311585505.4
申请日:2023-11-27
Applicant: 之江实验室
Abstract: 本发明公开了一种基于多智能体强化学习的网络可扩展路由方法与系统,通过PageRank算法对网络节点重要性进行建模,并选取网络中的关键节点,然后在若干个关键网络节点上训练Actor网络,在SDN控制器上训练Critic网络,基于多智能体强化学习进行网络流量的逐跳路由,实现大型数据中心网络的可扩展路由。通过本发明既提升了路由方案的稳定性又降低了大型网络中路由寻优的复杂度;同时不需要传统监督学习方法中的带标签的样本,通过与环境反复交互获得实时反馈的样本,以指导模型的迭代和优化;奖励函数的设计综合考虑了网络链路的吞吐量、时延和丢包率,通过多种指标加权指导多智能体生成最优的流量路由策略。
-
公开(公告)号:CN116996443B
公开(公告)日:2024-01-23
申请号:CN202311238774.3
申请日:2023-09-25
Applicant: 之江实验室
IPC: H04L47/10 , H04L41/0823 , H04L41/12 , G06N3/042 , G06N3/092
Abstract: 本发明公开了一种结合GNN和SAC模型的网络协同流量调度方法与系统,通过获取端口拥塞信息、通信和计算阶段信息,将计算和通信阶段信息、DAG拓扑信息作为输入,生成传输过程的表征向量;然后融合端口拥塞信息、通信和计算阶段信息、DAG拓扑信息和表征向量,生成状态表征向量;最后将状态表征向量作为SAC模型的输入,得到强化学习智能体的输出并映射为调度策略,得到整个调度任务的运行时间,作为奖励用于SAC模型的迭代优化。本发明中图神经网络和强化学习智能体的模型迭代能够及时根据环境的变化自适应地调整网络参数,并给出恰当的动作策略;本发明能使模型产生的调度策略更准确,从而实现数据中心网络中协同流量的高效调度。
-
公开(公告)号:CN116996443A
公开(公告)日:2023-11-03
申请号:CN202311238774.3
申请日:2023-09-25
Applicant: 之江实验室
IPC: H04L47/10 , H04L41/0823 , H04L41/12 , G06N3/042 , G06N3/092
Abstract: 本发明公开了一种结合GNN和SAC模型的网络协同流量调度方法与系统,通过获取端口拥塞信息、通信和计算阶段信息,将计算和通信阶段信息、DAG拓扑信息作为输入,生成传输过程的表征向量;然后融合端口拥塞信息、通信和计算阶段信息、DAG拓扑信息和表征向量,生成状态表征向量;最后将状态表征向量作为SAC模型的输入,得到强化学习智能体的输出并映射为调度策略,得到整个调度任务的运行时间,作为奖励用于SAC模型的迭代优化。本发明中图神经网络和强化学习智能体的模型迭代能够及时根据环境的变化自适应地调整网络参数,并给出恰当的动作策略;本发明能使模型产生的调度策略更准确,从而实现数据中心网络中协同流量的高效调度。
-
公开(公告)号:CN115905871B
公开(公告)日:2023-08-22
申请号:CN202211596171.6
申请日:2022-12-12
Applicant: 之江实验室
IPC: G06F18/214 , G06F18/22 , G06F17/16
Abstract: 本发明公开了一种基于矩阵相似性的网络传输文件信息快速判别方法,主要针对数据包在网络传输过程中,由于时序的干扰,接收的数据包发生了时序差,将数据包映射为列偏移的矩阵,通过汉明重量的检测方法,快速否定非相似性矩阵,实现矩阵相似性的精确判定。首先对矩阵进行相似性粗筛,再对粗筛保留的矩阵进行精准比对,最后实现矩阵相似性的判别。本发明还包括一种基于矩阵相似性的网络传输文件信息快速判别系统。本发明主要应用于信息论、加密通信、编码理论和密码学等相关领域,并推广到整数域矩阵相似性的判别。
-
公开(公告)号:CN115996197B
公开(公告)日:2023-06-16
申请号:CN202310259202.7
申请日:2023-03-17
Applicant: 之江实验室
IPC: H04L47/2425 , H04L47/12 , H04L41/14
Abstract: 本发明公开了一种流量拥塞前置的分布式计算流量仿真系统与方法,包括:发收包终端组件,接收并处理仿真系统参数,得到分布式计算任务的依赖关系矩阵以及计算阶段耗时向量,选择监听端口;协同流量传输任务线程构建组件,用于在分布式计算任务开始时和任一协同流量传输结束时,构建一计算模拟线程,在线程被唤醒后获取流量传输策略以创建协同流量传输任务线程;协同流量任务管理器,通过协同流量传输任务线程池完成协同流量任务的管理;环境监听组件,用于监听端口并接收各种报文;数据面可编程交换机组件,基于报警阈值和任务优先级进行拥塞预警并配置网络资源。本发明在降低丢包率的同时还将网络资源优先分配给较高优先级的任务和流量。
-
公开(公告)号:CN115905871A
公开(公告)日:2023-04-04
申请号:CN202211596171.6
申请日:2022-12-12
Applicant: 之江实验室
IPC: G06F18/214 , G06F18/22 , G06F17/16
Abstract: 本发明公开了一种基于矩阵相似性的网络传输文件信息快速判别方法,主要针对数据包在网络传输过程中,由于时序的干扰,接收的数据包发生了时序差,将数据包映射为列偏移的矩阵,通过汉明重量的检测方法,快速否定非相似性矩阵,实现矩阵相似性的精确判定。首先对矩阵进行相似性粗筛,再对粗筛保留的矩阵进行精准比对,最后实现矩阵相似性的判别。本发明还包括一种基于矩阵相似性的网络传输文件信息快速判别系统。本发明主要应用于信息论、加密通信、编码理论和密码学等相关领域,并推广到整数域矩阵相似性的判别。
-
-
-
-
-
-
-
-
-