-
公开(公告)号:CN104811646B
公开(公告)日:2018-07-24
申请号:CN201510245337.3
申请日:2015-05-15
Applicant: 电子科技大学
IPC: H04N5/781
Abstract: 本发明公开了基于连续存储模型的多视频流数据并发调制及缓冲的存储方法。包括步骤:A、在数据存储节点初始化时,预先在每块刚进行过格式化的磁盘上建立固定大小的块文件,再将每个块文件划分成若干个连续固定大小的文件片;B、当多路视频流网络I/O到来时,每一路视频流的数据按照文件片的大小,在内存缓存中合并成一个或多个完整的片数据;C、调度器将片数据批量写入磁盘中的文件片中。本发明针对海量高清视频流数据的存储,提出了一种自定义的连续存储模型,有效解决了文件频繁创建和删除导致的磁盘分区空间碎片化,避免了磁盘磁头在视频流文件并发写入过程中的来回移动,高效利用了磁盘I/O吞吐率,同时提升了磁盘的写入速率。
-
公开(公告)号:CN105162847A
公开(公告)日:2015-12-16
申请号:CN201510487363.7
申请日:2015-08-10
Applicant: 电子科技大学
IPC: H04L29/08
CPC classification number: Y02D50/30 , H04L67/1097
Abstract: 一种分布式流数据存储系统的存储资源规划方法,包括:获得满足最大存储需求所需数据服务器的最少数量;将数据服务器中的每块磁盘等分为条条带;根据实际存储需求设置台数据服务器;将同一台数据服务器中的每Nb/Db条条带集合成条带捆,所述条带捆中的任意两条条带不在同一磁盘上;将所有条带捆集合成存储资源带,所述存储资源带中的任意个相邻条带捆不在同一数据服务器中;将在同一条带中执行的写任务集合成任务集束,所有任务集束构成任务总窗口,使所述任务总窗口在所述存储资源带中滚动。本发明提供的规划方法,能降低分布式流数据存储系统的功耗、减小设备损耗、减少产生的碎片。
-
公开(公告)号:CN105100815A
公开(公告)日:2015-11-25
申请号:CN201510433083.8
申请日:2015-07-22
Applicant: 电子科技大学
IPC: H04N21/218 , H04N21/231 , H04N21/2312 , H04N21/232
CPC classification number: H04N21/2181 , H04N21/21805 , H04N21/23103 , H04N21/2312 , H04N21/2326
Abstract: 本发明公开了基于时间序列的流式数据分布式元数据管理方法。包括以下步骤:A、元数据服务器基于对象维度和时间维度,记录和管理元数据;B、元数据服务器记录和管理视频流的元数据,包括每个视频流的摄像头位置信息、当前副本定位信息、基于时间序列记录的视频流历史数据的存储位置;同时,元数据服务器基于对象维度,记录所有数据存储节点的元数据;C、数据存储节点基于对象维度记录视频流数据在磁盘具体位置的元数据信息;同时记录该数据存储节点上所有磁盘的元数据信息;D、数据存储节点中的所有元数据持久化并集中存储在某块磁盘的固定位置。本发明保证了视频回放请求能够快速定位到所需读取的数据和故障后的高效正确恢复。
-
公开(公告)号:CN105162847B
公开(公告)日:2018-05-08
申请号:CN201510487363.7
申请日:2015-08-10
Applicant: 电子科技大学
IPC: H04L29/08
CPC classification number: Y02D50/30
Abstract: 一种分布式流数据存储系统的存储资源规划方法,包括:获得满足最大存储需求所需数据服务器的最少数量;将数据服务器中的每块磁盘等分为条条带;根据实际存储需求设置台数据服务器;将同一台数据服务器中的每Nb/Db条条带集合成条带捆,所述条带捆中的任意两条条带不在同一磁盘上;将所有条带捆集合成存储资源带,所述存储资源带中的任意个相邻条带捆不在同一数据服务器中;将在同一条带中执行的写任务集合成任务集束,所有任务集束构成任务总窗口,使所述任务总窗口在所述存储资源带中滚动。本发明提供的规划方法,能降低分布式流数据存储系统的功耗、减小设备损耗、减少产生的碎片。
-
公开(公告)号:CN104811646A
公开(公告)日:2015-07-29
申请号:CN201510245337.3
申请日:2015-05-15
Applicant: 电子科技大学
IPC: H04N5/781
Abstract: 本发明公开了基于连续存储模型的多视频流数据并发调制及缓冲的存储方法。包括步骤:A、在数据存储节点初始化时,预先在每块刚进行过格式化的磁盘上建立固定大小的块文件,再将每个块文件划分成若干个连续固定大小的文件片;B、当多路视频流网络I/O到来时,每一路视频流的数据按照文件片的大小,在内存缓存中合并成一个或多个完整的片数据;C、调度器将片数据批量写入磁盘中的文件片中。本发明针对海量高清视频流数据的存储,提出了一种自定义的连续存储模型,有效解决了文件频繁创建和删除导致的磁盘分区空间碎片化,避免了磁盘磁头在视频流文件并发写入过程中的来回移动,高效利用了磁盘I/O吞吐率,同时提升了磁盘的写入速率。
-
-
-
-