一种数据处理系统及方法
    1.
    发明公开

    公开(公告)号:CN118897727A

    公开(公告)日:2024-11-05

    申请号:CN202310492750.4

    申请日:2023-05-04

    Abstract: 一种数据处理系统及方法,涉及计算机技术领域,用于在分布式计算中解决由于内存的存储空间有限,而导致的计算节点中内存和硬盘之间的不必要的数据交换的问题,以减少资源浪费。其中,数据处理系统包括:第一计算节点,包括第一处理器,第一处理器通过第一计算节点的通信总线连接至内存池;第二计算节点,包括第二处理器,第二处理器通过第二计算节点的通信总线连接至内存池;第一处理器,用于生成M个数据,根据通信总线对应的协议,将M个数据经由第一处理器的缓存存储至内存池;第二处理器,用于根据通信总线对应的协议,从内存池中获取N个数据至第二处理器的缓存,并对N个数据进行处理,其中,M个数据包括N个数据,M和N均为正整数。

    一种检测集群系统通信状态的方法及网关集群

    公开(公告)号:CN106452952B

    公开(公告)日:2019-11-22

    申请号:CN201610865479.4

    申请日:2016-09-29

    Abstract: 本发明实施例提供一种检测集群系统通信状态的方法及网关集群,涉及计算机领域,用以在集群系统中存在海量通信链路时,降低中心节点的压力,包括第一网关集群和第二网关集群,其中,第一网关集群包括第一中心节点以及N个第一网关,第二网关集群包括第二中心节点以及M个第二网关,N个第一网关中的一个或多个第一网关与第二网关集群中的至少一个第二网关存在通信链路,第一中心节点获取状态检测消息,该状态检测消息用于指示一个或多个第一网关中的每个第一网关与第二网关集群中的第二网关之间的通信链路的通信状态;第一中心节点根据状态检测消息确定第一网关集群与第二网关集群之间的通信状态。本发明实施例应用于分布式集群系统场景中。

    一种数据处理系统、方法及连接设备

    公开(公告)号:CN118939597A

    公开(公告)日:2024-11-12

    申请号:CN202411002660.3

    申请日:2023-03-07

    Abstract: 一种数据处理系统、方法及连接设备,用于将超低延迟通信协议(比如CXL协议或者UB协议)与RDMA协议实现适配。在本申请中,该数据处理系统中包括:第一计算集群、第二计算集群和连接设备,其中,第一计算集群中包括第一计算设备,第二计算集群中包括第二计算设备。进一步的,连接设备与第一计算设备连接,连接设备用于管理第一计算设备提供的第一计算集群的内存地址信息,及第二计算设备提供的第二计算集群的内存地址信息;第一计算设备用于:接收访问请求,访问请求用于访问第二计算设备的内存空间;从连接设备管理的第二计算集群的内存地址信息中查找内存空间的地址;根据地址访问第二计算设备中的内存空间。

    分布式内存系统、分布式内存管理方法、装置及相关设备

    公开(公告)号:CN117851021A

    公开(公告)日:2024-04-09

    申请号:CN202211212936.1

    申请日:2022-09-30

    Abstract: 本申请提供了一种分布式内存系统,该分布式内存系统可以不依赖管理节点进行内存信息同步。其中,分布式内存系统包括N个节点,所述N个节点的内存构成共享内存池,所述N大于或等于2;所述N个节点中的第一节点用于通过所述N个节点中的第二节点获取所述N个节点中除所述第一节点外的N‑1个节点的内存信息,所述N‑1个节点的内存信息与所述第一节点的内存信息构成所述共享内存池的信息,所述第一节点为所述N个节点中的任意一个节点;所述第一节点还用于基于所述共享内存池的信息为业务分配所述共享内存池中的内存。本申请还提供了对应的分布式内存管理方法、装置、计算设备集群、计算机可读存储介质以及计算机程序产品。

    一种鉴权方法及相关设备
    6.
    发明公开

    公开(公告)号:CN112948842A

    公开(公告)日:2021-06-11

    申请号:CN201911264301.4

    申请日:2019-12-10

    Inventor: 许德智 张景芳

    Abstract: 本申请提供一种鉴权方法及相关设备。其中,该方法包括:数据服务器接收访问请求,该访问请求中携带用户的标识,用于请求访问业务数据,该数据服务器用于存储所述业务数据;该数据服务器产生权限策略获取请求,该权限策略获取请求中携带用户的标识;将该权限策略获取请求发送至分布式存储系统,该权限策略获取请求用于指示分布式存储系统根据用户的标识确定存储该用户的权限策略存储设备;接收存储该用户的权限策略的存储设备发送的用户的权限策略;根据用户的权限策略确定访问请求是否有访问所述业务数据的权限。上述方法能够避免在数据服务器上对用户的访问权限策略进行同步操作,提高数据服务器在鉴权时的准确性和可靠性。

    一种资源池的分区视图发送方法及管理节点

    公开(公告)号:CN105630419B

    公开(公告)日:2018-09-21

    申请号:CN201510991869.1

    申请日:2015-12-25

    Inventor: 张景芳 金敏

    Abstract: 本发明实施例公开了一种资源池的分区视图发送方法及管理节点。该方法应用于分布式存储系统,分布式存储系统包括路由节点和管理节点。该方法包括:所述管理节点接收所述路由节点发送的资源池分区视图获取请求;所述管理节点根据所述资源池分区视图获取请求从所述所有资源池的分区视图中按照分区视图获取规则获取所述所有资源池中的第一部分资源池的分区视图,并将所述第一部分资源池的分区视图发送给所述路由节点;当所述管理节点处于空闲状态时,所述管理节点将所述所有资源池中的第二部分资源池的分区视图发送给所述路由节点。实施本发明实施例可以减小向路由节点发送的资源池的分区视图所占据的通信带宽。

    一种瓶颈节点的筛选方法、装置及计算机设备

    公开(公告)号:CN115904857A

    公开(公告)日:2023-04-04

    申请号:CN202111162464.9

    申请日:2021-09-30

    Inventor: 崔敏 张景芳

    Abstract: 本申请公开了一种瓶颈节点的筛选方法、装置及计算机设备。在该方法中,确定待检测系统的第一执行时长,待检测系统包括至少一条执行路径,每条所述执行路径包括多个执行节点;针对第一待检测执行节点进行延时注入,确定待检测系统的第二执行时长;针对第二待检测执行节点进行延时注入,确定待检测系统的第三执行时长;根据第一执行时长、第二执行时长和第三执行时长,确定第一、第二待检测执行节点是否为可能的瓶颈节点。在上述方法中,对待检测执行节点进行延时注入,获取延时注入前的执行时长和延时注入后的执行时长,从而可以分析延时注入对各执行节点的执行时长的影响,从而确定待检测的执行节是否存在性能瓶颈问题。

    一种数据处理方法及装置
    10.
    发明公开

    公开(公告)号:CN114902636A

    公开(公告)日:2022-08-12

    申请号:CN201980103358.8

    申请日:2019-12-31

    Inventor: 张景芳 张尧 黄焰

    Abstract: 本发明实施例提供一种数据处理方法及装置。所述方法包括:获取第一数据系统中的数据的元数据;将所述第一数据系统中的数据的元数据由第一格式转换为第二格式,所述第一格式为所述第一数据系统中的数据的元数据的格式,所述第二格式是所述第一数据系统和第二数据系统都能够识别的元数据格式。使用本发明实施例提供的方法,为多个数据系统定义多个数据系统都能识别的统一的元数据格式,简化了不同数据系统之间数据的传输。

Patent Agency Ranking