-
公开(公告)号:CN120011131A
公开(公告)日:2025-05-16
申请号:CN202510117829.8
申请日:2025-01-24
Applicant: 杭州海康威视数字技术股份有限公司 , 华中科技大学
IPC: G06F11/10
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于子块化的低内存编码方法及装置,方法包括:将包含#imgabs0#个数据块和#imgabs1#个校验块的条带均分成#imgabs2#个子条带,每个子条带包括#imgabs3#个子数据块和#imgabs4#个子校验块,#imgabs5#;根据数据块数量和校验块数量构建编码矩阵,利用计算单元按照所述编码矩阵以子块为单位分段计算原始数据子块的校验编码;重复计算每个原始数据子块的校验编码,直至完成所有原始数据子块的校验信息的计算,得到最终计算结果。通过本申请能够减少编码过程中的峰值内存,缩短编码时间。
-
公开(公告)号:CN119127564A
公开(公告)日:2024-12-13
申请号:CN202411308087.9
申请日:2024-09-19
Applicant: 杭州海康威视数字技术股份有限公司 , 华中科技大学
IPC: G06F11/10
Abstract: 本申请属于计算机存储技术领域,具体公开了一种低修复带宽的纠删码编码方法及装置。本申请,通过将k个数据块和m个校验块组成一个条带,在使用纠删码编码方式的分布式存储系统中,通过将该条带子条带化,并将部分子条带中的子数据块的校验信息嵌入到其他子条带的子校验块中,从而在一个分布式存储系统中的存储节点失效时,能够通过这些嵌入的校验信息来减少部分子条带的修复带宽。
-
公开(公告)号:CN119759906A
公开(公告)日:2025-04-04
申请号:CN202411872072.5
申请日:2024-12-18
Applicant: 华中科技大学
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于混合编码的二进制大对象存储修复方法和装置,该方法包括:获取多个二进制大对象Blob,并对多个Blob中的小型Blob进行非系统性最小存储再生MSR编码,对多个Blob中的大型Blob进行系统性MSR编码;将编码后的多个Blob均衡存储在多个存储节点中;基于待修复Blob的类型,确定对应的修复策略,并基于修复策略以及所述多个存储节点中的编码后的多个Blob,使用分组并行修复技术对待修复Blob进行修复。该方法可以提升Blob修复效率。
-
公开(公告)号:CN119807201A
公开(公告)日:2025-04-11
申请号:CN202411872067.4
申请日:2024-12-18
Applicant: 华中科技大学
IPC: G06F16/22 , G06F16/27 , G06F16/2455
Abstract: 本申请属于计算机存储技术领域,具体公开了一种基于区块链的元数据管理方法及系统。本申请,客户端通过向区块链中用于存储目标元数据和目标元数据对应的目标校验数据的存储位置的一致性哈希环发送第一请求;区块链根据客户端发送的第一请求中携带的待查询的目标元数据及其对应的目标校验数据的存储位置,获取目标元数据或目标校验数据;客户端接收区块链发送的目标元数据或目标校验数据,并根据接收到的目标元数据或目标校验数据获取待查询的目标元数据。与现有区块链直接查询方式相比,无需遍历整个区块链,减少了查询开销,提高了查询效率,与现有区块链的间接查询方式相比,区块链中的节点无需额外存储一份完整的账本数据,减少了存储开销。
-
公开(公告)号:CN118585130A
公开(公告)日:2024-09-03
申请号:CN202410717267.6
申请日:2024-06-04
Applicant: 华中科技大学
Abstract: 本申请属于计算机存储领域,具体公开了一种用于纠删码修复的读取块性能优化方法和系统。通过本申请,获取用于纠删码修复各条带所需数据块在磁盘中的布局,将各条带之间的关系按照获取到的布局进行图建模,对建模生成的图进行图着色,求出最小色数作为纠删码修复所需时间片,同时根据条带颜色得到条带的修复顺序。该方法能够在平衡从不同磁盘中读取数据量的同时,有效提高磁盘读取数据的并行性,提高修复性能。
-
公开(公告)号:CN120011132A
公开(公告)日:2025-05-16
申请号:CN202510206377.0
申请日:2025-02-25
Applicant: 华中科技大学
Abstract: 本申请属于计算机存储技术领域,具体公开了一种piggyback编码的单块修复跨机架流量优化方法,包括:基于piggyback编码结果中的各个数据块,构建目标图,目标图中的顶点代表数据块,边的权值为两个数据块之间的耦合度;针对各个耦合度,执行图连通算法,获取各个耦合度对应的一组连通分量;按照机架数量,对每一组连通分量进行调整,获取对应的均匀分组,均匀分组中数据块集合的数量等于机架数量,均匀分组中不同数据块集合之间的数据块数量差异小于预设阈值;在多个均匀分组中,选取跨机架流量开销最小的一项作为目标分组。通过本申请,实现针对piggyback编码的单块修复,优化跨机架流量,提高修复性能。
-
公开(公告)号:CN118656378A
公开(公告)日:2024-09-17
申请号:CN202410861730.4
申请日:2024-06-28
Applicant: 华中科技大学
IPC: G06F16/23 , G06F16/22 , G06F16/2455
Abstract: 本申请属于计算机存储领域,具体公开了一种纠删码条带数据更新方法、装置、电子设备及介质,该方法包括:接收客户端发来的多个携带有目标数据信息的数据更新请求,并将各个数据更新请求存储至预设存储单元中;当预设存储单元中存储的更新数据的总容量达到预设阈值时,根据各个数据更新请求携带的数据块编号,从预设存储单元中获取数据块编号同属一个纠删码条带的所有目标数据更新请求;基于各个目标数据更新请求携带的数据块的更新数据和更新地址,对纠删码条带进行数据更新。通过本申请,可以有效减少纠删码条带更新对存储设备的访问,降低纠删码条带更新的开销,提高系统数据更新的吞吐量。
-
-
-
-
-
-