一种元数据存储方法及其设备

    公开(公告)号:CN113625938B

    公开(公告)日:2024-07-30

    申请号:CN202010615013.5

    申请日:2020-06-30

    Inventor: 任仁 王晨

    Abstract: 本申请实施例公开了一种元数据存储方法,本方法可以用于存储系统中。本申请实施例方法包括:第一元数据存储单元和第二元数据存储单元,其中第一元数据存储单元的尺寸大于第二元数据存储单元的尺寸,当目标数据的尺寸达到设定阈值时,按照第一元数据存储单元存储目标数据的元数据,或者,当目标数据的尺寸小于设定阈值时,按照第二元数据存储单元存储目标数据的元数据。本申请实施例可以减少存储数据时对应的元数据,节省了存储资源。

    一种数据处理方法以及相关设备
    2.
    发明公开

    公开(公告)号:CN117827474A

    公开(公告)日:2024-04-05

    申请号:CN202211195959.6

    申请日:2022-09-28

    Inventor: 王伟 史玉玲 任仁

    Abstract: 本申请公开了一种数据处理方法,该数据处理方法应用于数据库集群,数据库集群包括第一计算节点和第二计算节点,第一计算节点对应的数据库资源元数据存储于第一计算节点的共享内存中,数据库资源元数据由第一计算节点中的数据库进程进行管理。这样,当第一计算节点的数据库进程发生异常时,共享内存中存储的数据库资源元数据依然能够被获取,因此,第一计算节点可以在相应的数据库进程发生异常之后,向数据库进程未发生异常的第二计算节点发送共享内存中存储的数据库资源元数据,以使得第二计算节点可以接收到数据库资源元数据,从而无需花费大量的时间来对数据库资源元数据进行恢复,大大提升了对异常的数据库任务的处理效率。

    一种数据系统、数据访问方法及设备

    公开(公告)号:CN116266842A

    公开(公告)日:2023-06-20

    申请号:CN202210142866.0

    申请日:2022-02-16

    Abstract: 一种数据系统、数据访问方法及设备,本申请中,客户端访问服务端中数据时,向服务端发送数据请求,数据请求包括序列,序列包括元数据状态的地址、元数据的地址以及元数据状态的地址。服务端根据序列获取多个数据,该多个数据包括元数据、获取元数据之前的第一状态、获取元数据之后的第二状态。服务端在获取该多个数据之后,向客户端发送数据响应,数据响应包括元数据、第一状态、以及第二状态。客户端在向服务端请求元数据时,客户端通过数据请求从服务端获取多个数据,能够有效提升服务端与客户端之间的交互效率。客户端获取了第一状态和第二状态之后,通过该第一状态和第二状态确定元数据的完整性,保证客户端能够准确的访问服务端中的数据。

    访问数据的方法及装置
    4.
    发明公开

    公开(公告)号:CN114817232A

    公开(公告)日:2022-07-29

    申请号:CN202110083500.6

    申请日:2021-01-21

    Abstract: 本申请公开了访问数据的方法及装置,涉及存储技术领域,可以降低访问时延。该方法可以应用于存储系统中,该存储系统包括客户端和服务端,客户端和服务端支持内存访问协议,该方法包括:客户端向服务端发送第一读请求,服务端接收到第一读请求后,根据第一读请求中的待读取数据的元数据的位置信息,读取该元数据,并且根据该元数据获得待读取数据,将待读取数据发送给客户端。其中,元数据的位置信息用于指示元数据位于服务端中的位置,并且元数据的位置信息是根据待读取数据的关键字与预测信息获得的。

    数据处理方法及存储设备
    5.
    发明公开

    公开(公告)号:CN113806341A

    公开(公告)日:2021-12-17

    申请号:CN202010784929.3

    申请日:2020-08-06

    Abstract: 本申请提供了一种数据处理方法及存储设备,属于存储技术领域。本申请由于存储设备在重复数据删除处理和压缩处理时采用了不一样的粒度,采用大粒度对所述数据进行重复数据删除处理,采用小粒度对所述数据进行压缩处理,因此摆脱了重删粒度和压缩粒度必须相同的限制,一定程度上避免粒度过大而导致重删率下降以及粒度过小而导致压缩率下降,有助于提升重删压缩整体的缩减率。

    数据存储方法、装置、计算机设备及存储系统

    公开(公告)号:CN119719049A

    公开(公告)日:2025-03-28

    申请号:CN202311266328.3

    申请日:2023-09-27

    Abstract: 本申请公开了一种数据存储方法、装置、计算机设备及存储系统,涉及计算机领域。方法包括:对数据库的页面执行数据库操作,得到更新后页面;将更新后页面缓存到应用服务器的存储器中;将更新后页面对应的事物日志存储到存储服务器中。如此将更新后页面存入应用服务器,将事物日志存入存储服务器,相对于将更新后页面及事物日志存储到存储服务器的方法,避免向存储服务器传输更新后页面,减少了占用应用服务器与存储服务器之间带宽,也省去了存储服务器中存储阵列的缓存的占用。

    数据处理系统、数据处理方法、装置及相关设备

    公开(公告)号:CN117931831A

    公开(公告)日:2024-04-26

    申请号:CN202211253915.4

    申请日:2022-10-13

    Abstract: 本发明提供一种数据处理系统,包括计算集群、存储集群,计算集群包括主计算节点以及从计算节点,存储集群包括至少一个存储节点以及数据处理装置;主计算节点,用于接收访问请求,并向该存储集群写入数据;数据处理装置,用于监控并识别写入的数据包括目标重做日志时,控制至少一个存储节点中第一存储节点回放目标重做日志,以将该目标重做日志中记录的目标数据更新至持久化存储的数据中;从计算节点,用于根据更新后的持久化存储的数据,接管主计算节点上的访问请求。如此,从计算节点接管主计算节点上的访问请求时,无需执行回放重做日志的过程,从而有效缩短数据处理系统的RTO。此外,本申请还公开相应的数据处理方法、装置及相关设备。

    数据容灾方法、系统及存储介质
    8.
    发明公开

    公开(公告)号:CN117909133A

    公开(公告)日:2024-04-19

    申请号:CN202211281248.0

    申请日:2022-10-19

    Abstract: 公开了一种数据容灾方法、系统及存储介质,涉及数据存储领域。不同站点的存储节点之间建立有复制关系,该复制关系指示了不同节点的数据走向,实现了不同站点在存储侧具有容灾功能。而且,在计算节点读取同属于一个站点中存储节点的复制状态后,该计算节点可更新站点的容灾行为,实现了不同站点在计算侧具有容灾功能。不同站点的计算节点之间不用建立复制关系,相比于从计算侧建立复制关系来实现计算侧和存储侧容灾的方案,减少了数据容灾过程中数据从复制源节点到复制目标节点的I/O栈的长度,避免了计算节点同时执行数据容灾操作和其他业务,提升了容灾系统的数据容灾性能以及数据的安全性。

    一种元数据处理方法、存储设备及存储介质

    公开(公告)号:CN114077583A

    公开(公告)日:2022-02-22

    申请号:CN202011063139.2

    申请日:2020-09-30

    Abstract: 本申请提供了一种元数据处理方法、存储设备及存储介质,存储设备获取第一元数据以及第二元数据,该第一元数据以及第二元数据都是按照第一粒度存储的;然后,存储设备将第一元数据和第二元数据进行合并以获得目标元数据,并将该目标元数据按照第二粒度写入存储设备,其中,第二粒度的尺寸大于第一粒度的尺寸。这样,在读取源卷对应的数据时,存储设备可以基于尺寸更大的第二粒度读取元数据,从而可以增大元数据的读取粒度,提高了元数据的读取效率,进而可以提高数据的读取效率。如此,存储设备不仅具有较优的写性能,也具有较优的读性能。

    一种重复数据的删除方法及装置

    公开(公告)号:CN110618789B

    公开(公告)日:2021-08-20

    申请号:CN201910748958.1

    申请日:2019-08-14

    Inventor: 任仁 王晨 郭平静

    Abstract: 一种重复数据的删除方法及装置,在该方法中,首先获取包含多个指纹记录项的指纹记录,然后从该指纹记录中确定出包括同一指纹的至少两个第一指纹记录项,例如,该至少两个第一指纹记录项中均包括第一指纹,从而将该至少两个第一指纹记录项中的该第一指纹对应的数据进行重复数据删除操作,删除该至少两个第一指纹记录项,以及,在该指纹记录中记录该第一指纹的存根,通过该第一指纹的存根指示该第一指纹为重复指纹。由于在指纹记录中增加与重复指纹对应的存根,这样,可以直接通过该存根来确定出该指纹记录项中包括的指纹是重复指纹,从而可以较快地确定出重复指纹,并进行重复数据删除操作,可以提高重复数据删除技术的效率。

Patent Agency Ranking