一种基于rocksdb排重数据导入图库的方法、装置及存储介质

    公开(公告)号:CN109614506A

    公开(公告)日:2019-04-12

    申请号:CN201811309649.6

    申请日:2018-11-05

    Abstract: 本发明提供了一种基于rocksdb排重数据导入图库的方法、装置及存储介质,该方法包括:待导入图库的数据进行分类得到多个数据类别,并为每一个数据类别设置一个类别标识,并设置每一个数据类别中数据之间的边关系;基于rocksdb顶点排重数据库对每个数据类别中的数据进行排重后作为顶点插入所述图库;基于rocksdb边排重数据库对数据之间的边关系进行排重后作为边插入所述图库。本发明先构建了与数据类别对应的rocksdb顶点排重数据库和rocksdb边排重数据库,在进行数据导入图库时,先进行顶点导入,顶点导入完毕后再进行边导入,解决了在导入Titan/JanusGraph图库的时候由于id没有排重导致实际数据重复而不可用的问题,由于建立了多个类别的排重库,提高了排重时的效率,提高了用户体验。

    跨数据中心协同计算方法及其系统

    公开(公告)号:CN106572191A

    公开(公告)日:2017-04-19

    申请号:CN201611005536.8

    申请日:2016-11-15

    CPC classification number: H04L67/1004 G06F16/22 H04L67/32

    Abstract: 本发明公开了一种跨数据中心协同计算方法及其系统,方法包括:在两个以上的数据中心中选取一数据中心作为主数据中心;数据中心将数据资源目录上报至主数据中心;主数据中心整合生成全局数据资源目录;数据中心将系统资源使用情况上报至主数据中心;主数据中心整合生成数据中心状态表;一数据中心获取计算请求并提交到主数据中心;根据全局数据资源目录,主数据中心确定计算任务对应的数据中心;根据数据中心状态表,判断数据中心是否均满足对应的计算条件;若是,将计算任务下发至数据中心;若否,将计算任务下发至满足计算条件的数据中心,或者进行提示。可减少数据中心之间的数据传输,降低网络负载,提高计算效率。

Patent Agency Ranking