一种基于运动矢量的监控视频内容去重方法和系统

    公开(公告)号:CN109274966A

    公开(公告)日:2019-01-25

    申请号:CN201811112610.5

    申请日:2018-09-21

    Inventor: 姚杰 曹强

    Abstract: 本发明公开了一种基于运动矢量的监控视频内容去重方法和系统,方法包括:随机选取每个视频切片中的连续的P帧视频帧,提取运动矢量信息,对每帧视频帧的宏块进行分割,得到运动宏块位图和运动宏块来源坐标表;利用运动宏块位图进行帧内滤波;利用过滤后的运动宏块位图和运动宏块来源坐标表进行帧间滤波;统计P帧视频帧中发生运动的宏块的个数,若发生运动的宏块的个数大于阈值,则数据块有运动情况,否则没有;当数据块有运动情况时,缓存数据块写入,当数据块没有运动情况时,清空数据块缓存区。本发明在保证关键信息不丢失的前提下,能够有效缩减实际数据存储量,去掉冗余的背景信息。

    一种基于数据缓存的纠删码集群存储扩容方法

    公开(公告)号:CN105630423B

    公开(公告)日:2018-11-27

    申请号:CN201511000387.1

    申请日:2015-12-25

    Abstract: 本发明公开了一种基于数据缓存的纠删码集群存储扩容方法,包括响应用户读请求、迁移缓存数据分块和更新校验分块的步骤;迁移旧节点缓存中的数据分块,同时利用新节点生成新条带中的校验分块;每个计算校验分块的节点本地磁盘保存一个校验分块,其他的校验分块发送给旧节点替换掉条带中的数据分块,条带中其余数据分块在旧节点的位置保持不变,当一个新条带分块均匀分布在集群各节点后,热数据分块从旧节点迁移到新增节点;缓存数据分块迁移支持热点数据在所有节点上的均匀分布;新增节点利用接收的缓存数据分块生成校验分块,分散计算操作的同时可减少新校验分块的网络传输量。

    一种集群下基于数据缓存的纠删码归档方法

    公开(公告)号:CN105610921B

    公开(公告)日:2018-09-07

    申请号:CN201510979326.8

    申请日:2015-12-23

    Abstract: 本发明公开了一种集群下基于数据缓存的纠删码归档方法,包括以下步骤:(1)根据用户访问请求,将所需数据分块从其所在生产节点读取到节点缓冲区,并将数据分块发送给访问节点,同时根据归档数据状态表将其转发给归档节点;(2)归档节点根据接收到的数据分块,更新每个数据节点的数据分块个数;判断归档节点是否接收到当前条带的全部数据分块,若是,则将当前条带进行归档;若否,则从生产集群读取冷数据块,将条带凑齐之后进行归档;本发明提供的这种纠删码归档方法,由于采用了用户访问缓存的数据分块,相比于普通纠删码归档方法,可大幅度减少归档节点从生产集群中读取数据分块的次数,可以在不影响用户访问的情况下进行纠删码归档操作,提高归档效率。

    一种固态盘及其读写操作方法

    公开(公告)号:CN104991738B

    公开(公告)日:2018-04-24

    申请号:CN201510345561.X

    申请日:2015-06-19

    Abstract: 本发明公开了一种固态盘及其读写操作方法。固态盘包括固态盘控制器、n+1个通道、m个SLC闪存芯片和m×n个MLC闪存芯片,其中,m和n均为正整数;m个SLC闪存芯片设置在n+1个通道的其中一个通道上,m×n个MLC闪存芯片设置在n+1个通道的剩余的n个通道上,剩余的n个通道中的每一个通道上均有m个MLC闪存芯片;SLC闪存芯片的存储容量较小,用于存储校验数据,MLC闪存芯片的存储容量较大,用于存储用户数据,SLC闪存芯片和MLC闪存芯片通过其所在的通道进行数据传输。本发明能有效地提高固态盘的使用寿命,降低存储系统的成本。

    一种数据中心的能源调度方法

    公开(公告)号:CN104217111B

    公开(公告)日:2017-07-11

    申请号:CN201410442483.0

    申请日:2014-09-02

    Abstract: 本发明公开了一种高效使用新能源的能源调度方法,以及辅助该方法实现的异构结点装置。它根据服务器上在一天二十四小时之内负载不均衡的特点,在低负载的情况下进行负载的调度,把低负载时间段内对能耗的需求降低,从而降低了整个系统一天内能耗的需求量。其中负载调度涉及在异构结点之间进行负载的分配策略;另外,将通过风能、太阳能等途径收集的有限新能源进行最高效化的利用。新能源的利用点包括两个,其一为在高负载的时间段,降低最高负载达到峰值对传统电能的需求,达到“削峰”的作用,其二为在一天中电费高的时间段尽可能多使用太阳能,即根据峰谷分时电价提高太阳能的使用价值,从而为服务商降低服务器的能耗以及电费。

    一种基于不同存储介质的分离式文件系统

    公开(公告)号:CN103902669B

    公开(公告)日:2017-06-16

    申请号:CN201410097343.4

    申请日:2014-03-17

    Abstract: 本发明公开了一种基于不同存储介质的分离式文件系统,不同存储介质包括非易失的小粒度读写的介质和非易失的大粒度读写的介质,非易失的小粒度读写的介质与内存总线相连,非易失的大粒度读写的介质与I/O总线相连;非易失的小粒度读写的介质用于存储文件系统的元数据,非易失的大粒度读写的介质用于存储文件系统的数据;非易失的小粒度读写的介质上,文件系统对元数据的操作使用小粒度的读写,非易失的大粒度读写的介质上,文件系统对数据的操作使用大粒度的读写。本发明将文件系统的元数据放在非易失的小粒度读写的介质上,且非易失的小粒度读写的介质与内存总线相连,加快了元数据操作的速度,能够有效地改善文件系统一致性和持久性的问题。

    一种基于任务负载感知的纠删码归档方法及系统

    公开(公告)号:CN106844060A

    公开(公告)日:2017-06-13

    申请号:CN201710141230.3

    申请日:2017-03-10

    Abstract: 本发明公开了一种基于任务负载感知的纠删码归档方法及系统,属于计算机存储技术领域。本发明方法首先获取纠删码集群中归档条带的每个节点任务数和每个节点上含有的当前归档条带数据分块个数;之后选取任务数最小且含有当前归档条带数据分块较多的一个存储节点作为编码节点,并更新编码节点的任务数;然后根据任务数最小原则和供给节点选取规则,依次选取所有数据分块的供给节点,并且更新其任务数;最后编码节点通过供给节点提供的数据分块进行编码计算,生成校验分块,完成归档任务。本发明还实现了一种基于任务负载感知的纠删码归档系统。本发明解决了现有归档方法中将大量归档任务集中分配到某个数据节点而导致的归档任务不均衡问题。

    一种纠删码存储中负载感知的数据归档方法

    公开(公告)号:CN104391759B

    公开(公告)日:2017-06-13

    申请号:CN201410631962.7

    申请日:2014-11-11

    Abstract: 本发明公开了一种纠删码存储中负载感知的数据归档方法,包括步骤:获取纠删码存储集群中生产集群的每个节点的负载权重值,并将负载权重值存储在数组中,并根据节点负载权重值来确定不同条带在生产集群中的归档节点集合。对第i个条带,初始化其归档节点集合为空,从第i个条带的数据分布集合中选择负载权重值最高的节点,并判断该节点的负载权重值是否大于该节点的数据块个数,如果为是,则将该节点对应的数据块填充在该条带的归档节点集合中,并更新所涉及节点的负载权重值;如果为否,则选择该条带数据分布集合中负载权值第二高的节点。本发明解决了现有方法中编码节点不考虑节点权值,仅从固定节点获取条带上所有数据块而导致的性能瓶颈问题。

    一种纠删码集群中失效节点的重构方法

    公开(公告)号:CN103645861B

    公开(公告)日:2016-04-13

    申请号:CN201310651547.3

    申请日:2013-12-03

    Abstract: 本发明公开了一种纠删码存储集群中失效节点的重构方法,包括:1)有节点失效时,根据节点的负载和网络带宽,初始化所有存活节点的权重值;2)选取权重值最大的K个存活节点,作为恢复该失效节点中的数据块读取分布,其中K为存储集群中数据节点的数目;3)将上述K个存活节点的权重值分别减1;4)判断权值大于0的节点数量是否小于K,若是则转到步骤5),若否则转到步骤2);5)根据所有数据块读取分布,解码出失效节点上对应偏移地址的数据块中的数据。本发明根据权重值选择重构失效节点的数据节点,减少了负载不均衡时的响应时间;同时降低了纠删码存储集群中各个节点因频繁的超负载而崩溃的概率,提高整个纠删码存储集群的可靠性。

Patent Agency Ranking