-
公开(公告)号:CN120010783A
公开(公告)日:2025-05-16
申请号:CN202510101745.5
申请日:2025-01-22
Applicant: 杭州海康威视数字技术股份有限公司 , 华中科技大学
IPC: G06F3/06
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于多队列的纠删码条带更新方法、装置和电子设备,该方法包括:获取原始条带中数据块的基本元数据信息;基于所述基本元数据信息,将所述数据块放入不同的预设编码队列,所述不同的预设编码队列包括高频更新编码队列、低频更新编码队列和无更新编码队列;基于不同的预设编码队列中的数据块,分别使用不同的预设生成策略生成条带。该方法可以降低纠删码条带更新对全闪集群中SSD盘的寿命损耗。
-
公开(公告)号:CN120011131A
公开(公告)日:2025-05-16
申请号:CN202510117829.8
申请日:2025-01-24
Applicant: 杭州海康威视数字技术股份有限公司 , 华中科技大学
IPC: G06F11/10
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于子块化的低内存编码方法及装置,方法包括:将包含#imgabs0#个数据块和#imgabs1#个校验块的条带均分成#imgabs2#个子条带,每个子条带包括#imgabs3#个子数据块和#imgabs4#个子校验块,#imgabs5#;根据数据块数量和校验块数量构建编码矩阵,利用计算单元按照所述编码矩阵以子块为单位分段计算原始数据子块的校验编码;重复计算每个原始数据子块的校验编码,直至完成所有原始数据子块的校验信息的计算,得到最终计算结果。通过本申请能够减少编码过程中的峰值内存,缩短编码时间。
-
公开(公告)号:CN119127564A
公开(公告)日:2024-12-13
申请号:CN202411308087.9
申请日:2024-09-19
Applicant: 杭州海康威视数字技术股份有限公司 , 华中科技大学
IPC: G06F11/10
Abstract: 本申请属于计算机存储技术领域,具体公开了一种低修复带宽的纠删码编码方法及装置。本申请,通过将k个数据块和m个校验块组成一个条带,在使用纠删码编码方式的分布式存储系统中,通过将该条带子条带化,并将部分子条带中的子数据块的校验信息嵌入到其他子条带的子校验块中,从而在一个分布式存储系统中的存储节点失效时,能够通过这些嵌入的校验信息来减少部分子条带的修复带宽。
-
公开(公告)号:CN119759906A
公开(公告)日:2025-04-04
申请号:CN202411872072.5
申请日:2024-12-18
Applicant: 华中科技大学
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于混合编码的二进制大对象存储修复方法和装置,该方法包括:获取多个二进制大对象Blob,并对多个Blob中的小型Blob进行非系统性最小存储再生MSR编码,对多个Blob中的大型Blob进行系统性MSR编码;将编码后的多个Blob均衡存储在多个存储节点中;基于待修复Blob的类型,确定对应的修复策略,并基于修复策略以及所述多个存储节点中的编码后的多个Blob,使用分组并行修复技术对待修复Blob进行修复。该方法可以提升Blob修复效率。
-
公开(公告)号:CN119759278A
公开(公告)日:2025-04-04
申请号:CN202411840823.5
申请日:2024-12-13
Applicant: 华中科技大学
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于编码矩阵秘密共享的去中心化数据加密去重存储方法,该方法包括:对待存储数据进行分块处理,生成多个数据块;基于所述多个数据块的内容指纹,通过多个去中心化的密钥服务器协同生成加密编码矩阵;基于所述加密编码矩阵对所述多个数据块进行加密,生成多个密文块;将所述多个密文块存储至分布式存储系统中,并基于所述多个密文块分别对应的内容指纹进行重复数据删除。该方法可以提高系统的扩展性和性能,确保数据的安全性和存储可靠性,适用于大规模分布式存储环境。
-
公开(公告)号:CN119807201A
公开(公告)日:2025-04-11
申请号:CN202411872067.4
申请日:2024-12-18
Applicant: 华中科技大学
IPC: G06F16/22 , G06F16/27 , G06F16/2455
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于区块链的元数据管理方法及系统。本申请,客户端通过向区块链中用于存储目标元数据和目标元数据对应的目标校验数据的存储位置的一致性哈希环发送第一请求;区块链根据客户端发送的第一请求中携带的待查询的目标元数据及其对应的目标校验数据的存储位置,获取目标元数据或目标校验数据;客户端接收区块链发送的目标元数据或目标校验数据,并根据接收到的目标元数据或目标校验数据获取待查询的目标元数据。与现有区块链直接查询方式相比,无需遍历整个区块链,减少了查询开销,提高了查询效率,与现有区块链的间接查询方式相比,区块链中的节点无需额外存储一份完整的账本数据,减少了存储开销。
-
公开(公告)号:CN118585130A
公开(公告)日:2024-09-03
申请号:CN202410717267.6
申请日:2024-06-04
Applicant: 华中科技大学
Abstract: 本申请属于计算机存储领域,具体公开了一种用于纠删码修复的读取块性能优化方法和系统。通过本申请,获取用于纠删码修复各条带所需数据块在磁盘中的布局,将各条带之间的关系按照获取到的布局进行图建模,对建模生成的图进行图着色,求出最小色数作为纠删码修复所需时间片,同时根据条带颜色得到条带的修复顺序。该方法能够在平衡从不同磁盘中读取数据量的同时,有效提高磁盘读取数据的并行性,提高修复性能。
-
公开(公告)号:CN120011132A
公开(公告)日:2025-05-16
申请号:CN202510206377.0
申请日:2025-02-25
Applicant: 华中科技大学
Abstract: 本申请属于计算机存储技术领域,具体公开了一种piggyback编码的单块修复跨机架流量优化方法,包括:基于piggyback编码结果中的各个数据块,构建目标图,目标图中的顶点代表数据块,边的权值为两个数据块之间的耦合度;针对各个耦合度,执行图连通算法,获取各个耦合度对应的一组连通分量;按照机架数量,对每一组连通分量进行调整,获取对应的均匀分组,均匀分组中数据块集合的数量等于机架数量,均匀分组中不同数据块集合之间的数据块数量差异小于预设阈值;在多个均匀分组中,选取跨机架流量开销最小的一项作为目标分组。通过本申请,实现针对piggyback编码的单块修复,优化跨机架流量,提高修复性能。
-
-
-
-
-
-
-