一种基于目录划分的元数据分布方法及装置

    公开(公告)号:CN103136338A

    公开(公告)日:2013-06-05

    申请号:CN201310042675.8

    申请日:2013-02-04

    Inventor: 马灿 王伟平 孟丹

    Abstract: 本发明涉及一种基于目录划分的元数据分布方法,包括以下步骤:获取元数据中的文件名,得到名称文件;对目录进行目录划分,得到多个目录分片文件,并为每个目录分片文件分配一个目录分片号;分别为每个名称文件分配一个目录分片号,将名称文件保存在相应的目录分片文件中;将名称文件存储于当前的目录分片文件中或者将目录分片文件进行分裂,为分裂出的目录分片文件分配目录分片号,将名称文件存储于当前的目录分片文件中或者分裂后的目录分片文件中;根据目录分片号与预定值判断当前的目录分片文件分裂出的目录分片文件的存储位置。本发明提高了系统的并发度,利用了更多并行资源,利用本地性优势,减少对网络带宽的消耗,提升系统的整体性能。

    基于多规则关联分析的网络舆情信息智能处理方法及系统

    公开(公告)号:CN112199583B

    公开(公告)日:2021-11-23

    申请号:CN202011003073.8

    申请日:2020-09-22

    Abstract: 本发明公开了一种基于多规则关联分析的网络舆情信息智能处理方法及系统。本方法步骤包括:1)为所选对象构建标签体系,所述标签体系为树形结构,其中首先按照标签类型建立多个二级标签节点,每一二级标签节点下面设置若干层节点;2)调度器按照引擎配置为各引擎设置对应所需过滤的数据类型和接收字段,并从标签体系中读取对应标签分配给对应引擎;3)调度器在接收到消息队列数据后将数据发送给对应引擎,各引擎根据所分配标签对收到的数据进行识别,然后将识别结果返回给调度器;4)调度器根据识别结果为对应的数据设置相应标签,同时统计各引擎的处理信息并存入到任务统计库;5)任务统计库根据统计信息获取当前的网络舆情。

    一种基于目录划分的元数据分布方法及装置

    公开(公告)号:CN103136338B

    公开(公告)日:2016-02-10

    申请号:CN201310042675.8

    申请日:2013-02-04

    Inventor: 马灿 王伟平 孟丹

    Abstract: 本发明涉及一种基于目录划分的元数据分布方法,包括以下步骤:获取元数据中的文件名,得到名称文件;对目录进行目录划分,得到多个目录分片文件,并为每个目录分片文件分配一个目录分片号;分别为每个名称文件分配一个目录分片号,将名称文件保存在相应的目录分片文件中;将名称文件存储于当前的目录分片文件中或者将目录分片文件进行分裂,为分裂出的目录分片文件分配目录分片号,将名称文件存储于当前的目录分片文件中或者分裂后的目录分片文件中;根据目录分片号与预定值判断当前的目录分片文件分裂出的目录分片文件的存储位置。本发明提高了系统的并发度,利用了更多并行资源,利用本地性优势,减少对网络带宽的消耗,提升系统的整体性能。

Patent Agency Ranking