-
公开(公告)号:CN106682061B
公开(公告)日:2019-09-17
申请号:CN201610901863.5
申请日:2016-10-17
Applicant: 暨南大学
IPC: G06F16/172 , G06F16/18 , G06F16/182
Abstract: 本发明公开了一种分布式起源数据收集与存储系统,包括:内核态的起源信息收集模块、用户态的起源记录生成模块以及存储层模块,其中,起源信息收集模块是一个轻量级堆栈式文件系统,能挂载于任意的POSIX标准文件系统之上,起源记录生成模块分析起源信息收集模块收集的起源日志,生成起源关系,存储层模块以分布式文件系统为存储后端,为其他两个模块提供存储服务并将起源记录持久化到键值型起源数据库中。此发明具有高灵活性、高可移植性特点,适用于任意支持POSIX标准的分布式文件系统,且具有在用户态收集起源信息所不可比拟的低性能开销。
-
公开(公告)号:CN105279240B
公开(公告)日:2018-07-13
申请号:CN201510632669.7
申请日:2015-09-28
Applicant: 暨南大学
IPC: G06F17/30
Abstract: 本发明公开了一种客户端起源信息关联感知的元数据预取方法及系统,所述方法包括:在客户端的内核空间实时收集起源信息日志记录,从内核空间传输到用户空间;在客户端选取一部分已收集的起源信息日志记录,作为元数据的关联性训练数据,计算元数据两两之间的关联分数,得到最初的强关联列表;当客户端发生文件访问请求,且文件的元数据不在客户端本地的元数据缓存中时,在客户端的强关联列表中,预取多个强关联的元数据,从元数据服务器下载相应的元数据,更新客户端本地的元数据缓存;根据新增的起源信息日志记录,定时更新元数据强关联列表。本发明提高了客户端的元数据缓存命中率,减少对元数据服务器的访问次数,从而提高元数据服务的性能。
-
公开(公告)号:CN106682061A
公开(公告)日:2017-05-17
申请号:CN201610901863.5
申请日:2016-10-17
Applicant: 暨南大学
IPC: G06F17/30
Abstract: 本发明公开了一种分布式起源数据收集与存储系统,包括:内核态的起源信息收集模块、用户态的起源记录生成模块以及存储层模块,其中,起源信息收集模块是一个轻量级堆栈式文件系统,能挂载于任意的POSIX标准文件系统之上,起源记录生成模块分析起源信息收集模块收集的起源日志,生成起源关系,存储层模块以分布式文件系统为存储后端,为其他两个模块提供存储服务并将起源记录持久化到键值型起源数据库中。此发明具有高灵活性、高可移植性特点,适用于任意支持POSIX标准的分布式文件系统,且具有在用户态收集起源信息所不可比拟的低性能开销。
-
公开(公告)号:CN105279240A
公开(公告)日:2016-01-27
申请号:CN201510632669.7
申请日:2015-09-28
Applicant: 暨南大学
IPC: G06F17/30
CPC classification number: G06F17/30194
Abstract: 本发明公开了一种客户端起源信息关联感知的元数据预取方法及系统,所述方法包括:在客户端的内核空间实时收集起源信息日志记录,从内核空间传输到用户空间;在客户端选取一部分已收集的起源信息日志记录,作为元数据的关联性训练数据,计算元数据两两之间的关联分数,得到最初的强关联列表;当客户端发生文件访问请求,且文件的元数据不在客户端本地的元数据缓存中时,在客户端的强关联列表中,预取多个强关联的元数据,从元数据服务器下载相应的元数据,更新客户端本地的元数据缓存;根据新增的起源信息日志记录,定时更新元数据强关联列表。本发明提高了客户端的元数据缓存命中率,减少对元数据服务器的访问次数,从而提高元数据服务的性能。
-
-
-