一种基于子块化的低内存编码方法及装置

    公开(公告)号:CN120011131A

    公开(公告)日:2025-05-16

    申请号:CN202510117829.8

    申请日:2025-01-24

    Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于子块化的低内存编码方法及装置,方法包括:将包含#imgabs0#个数据块和#imgabs1#个校验块的条带均分成#imgabs2#个子条带,每个子条带包括#imgabs3#个子数据块和#imgabs4#个子校验块,#imgabs5#;根据数据块数量和校验块数量构建编码矩阵,利用计算单元按照所述编码矩阵以子块为单位分段计算原始数据子块的校验编码;重复计算每个原始数据子块的校验编码,直至完成所有原始数据子块的校验信息的计算,得到最终计算结果。通过本申请能够减少编码过程中的峰值内存,缩短编码时间。

    基于混合编码的二进制大对象存储修复方法和装置

    公开(公告)号:CN119759906A

    公开(公告)日:2025-04-04

    申请号:CN202411872072.5

    申请日:2024-12-18

    Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于混合编码的二进制大对象存储修复方法和装置,该方法包括:获取多个二进制大对象Blob,并对多个Blob中的小型Blob进行非系统性最小存储再生MSR编码,对多个Blob中的大型Blob进行系统性MSR编码;将编码后的多个Blob均衡存储在多个存储节点中;基于待修复Blob的类型,确定对应的修复策略,并基于修复策略以及所述多个存储节点中的编码后的多个Blob,使用分组并行修复技术对待修复Blob进行修复。该方法可以提升Blob修复效率。

    基于编码矩阵秘密共享的去中心化数据加密去重存储方法

    公开(公告)号:CN119759278A

    公开(公告)日:2025-04-04

    申请号:CN202411840823.5

    申请日:2024-12-13

    Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于编码矩阵秘密共享的去中心化数据加密去重存储方法,该方法包括:对待存储数据进行分块处理,生成多个数据块;基于所述多个数据块的内容指纹,通过多个去中心化的密钥服务器协同生成加密编码矩阵;基于所述加密编码矩阵对所述多个数据块进行加密,生成多个密文块;将所述多个密文块存储至分布式存储系统中,并基于所述多个密文块分别对应的内容指纹进行重复数据删除。该方法可以提高系统的扩展性和性能,确保数据的安全性和存储可靠性,适用于大规模分布式存储环境。

    一种基于区块链的元数据管理方法及系统

    公开(公告)号:CN119807201A

    公开(公告)日:2025-04-11

    申请号:CN202411872067.4

    申请日:2024-12-18

    Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于区块链的元数据管理方法及系统。本申请,客户端通过向区块链中用于存储目标元数据和目标元数据对应的目标校验数据的存储位置的一致性哈希环发送第一请求;区块链根据客户端发送的第一请求中携带的待查询的目标元数据及其对应的目标校验数据的存储位置,获取目标元数据或目标校验数据;客户端接收区块链发送的目标元数据或目标校验数据,并根据接收到的目标元数据或目标校验数据获取待查询的目标元数据。与现有区块链直接查询方式相比,无需遍历整个区块链,减少了查询开销,提高了查询效率,与现有区块链的间接查询方式相比,区块链中的节点无需额外存储一份完整的账本数据,减少了存储开销。

    一种用于纠删码修复的读取块性能优化方法和系统

    公开(公告)号:CN118585130A

    公开(公告)日:2024-09-03

    申请号:CN202410717267.6

    申请日:2024-06-04

    Abstract: 本申请属于计算机存储领域,具体公开了一种用于纠删码修复的读取块性能优化方法和系统。通过本申请,获取用于纠删码修复各条带所需数据块在磁盘中的布局,将各条带之间的关系按照获取到的布局进行图建模,对建模生成的图进行图着色,求出最小色数作为纠删码修复所需时间片,同时根据条带颜色得到条带的修复顺序。该方法能够在平衡从不同磁盘中读取数据量的同时,有效提高磁盘读取数据的并行性,提高修复性能。

    piggyback编码的单块修复跨机架流量优化方法

    公开(公告)号:CN120011132A

    公开(公告)日:2025-05-16

    申请号:CN202510206377.0

    申请日:2025-02-25

    Abstract: 本申请属于计算机存储技术领域,具体公开了一种piggyback编码的单块修复跨机架流量优化方法,包括:基于piggyback编码结果中的各个数据块,构建目标图,目标图中的顶点代表数据块,边的权值为两个数据块之间的耦合度;针对各个耦合度,执行图连通算法,获取各个耦合度对应的一组连通分量;按照机架数量,对每一组连通分量进行调整,获取对应的均匀分组,均匀分组中数据块集合的数量等于机架数量,均匀分组中不同数据块集合之间的数据块数量差异小于预设阈值;在多个均匀分组中,选取跨机架流量开销最小的一项作为目标分组。通过本申请,实现针对piggyback编码的单块修复,优化跨机架流量,提高修复性能。

Patent Agency Ranking