基于流水线机制的跨中心协同计算的编排方法与系统

    公开(公告)号:CN114579190B

    公开(公告)日:2022-10-14

    申请号:CN202210145958.4

    申请日:2022-02-17

    Abstract: 本发明公开了一种基于流水线机制的跨数据中心协同计算的编排方法与系统,涉及跨数据中心协同计算技术领域。所述方法包括:各数据中心构建逻辑统一、物理分散的数据资源目录;根据协同分析需求,生成模型描述语言,并基于数据资源目录,使用模型描述语言对协同分析任务进行描述;对协同分析任务进行动态规划,生成跨中心流水线描述语言;基于跨中心流水线描述语言,生成跨中心的流水线子任务,并将流水线子任务分发到各数据中心执行,以向所述用户返回结果。本发明能够可视化配置跨数据中心的协同计算,监控协同计算任务规划及运行状况,能够提升跨数据中心的协同分析服务能力。

    基于层次编码的图数据结构表示、存储、查询方法及装置

    公开(公告)号:CN113961713A

    公开(公告)日:2022-01-21

    申请号:CN202111153488.8

    申请日:2021-09-29

    Abstract: 本发明公开了一种基于层次编码的图数据结构表示、存储、查询方法及装置,其结构表示表示方法包括依据一有向无环子图中根节点的数量,计算根节点的编码位数m0,并基于编码位数m0,生成各根节点的全局编码;依据各根节点的t跳子节点数量,计算t跳子节点的编码位数mt,并基于编码位数mt与相应的根节点编码或t‑1跳子节点编码,生成各t跳子节点的全局编码;基于各节点的全局编码,表示所述有向无环子图的结构。本发明实现了对无环子图上典型查询的加速。

    一种基于次级属性图的非结构化数据查询方法及系统

    公开(公告)号:CN111897911A

    公开(公告)日:2020-11-06

    申请号:CN202010529960.2

    申请日:2020-06-11

    Abstract: 本发明公开了一种基于次级属性图的非结构化数据查询方法及系统。本方法为:1)对于一目标数据库,将数据库中每条记录的非结构化数据作为对应记录的一级属性;2)提取每个一级属性中的内在信息作为该一级属性的次级属性图;3)对该目标数据库的查询语言进行扩展,增加语义操作符“->”;对该目标数据库的查询引擎进行扩展,用于编译并执行符合该语义操作符“->”语法的查询语句;4)查询引擎根据查询条件从缓存系统中查询符合查询条件的缓存结果,如果没有匹配结果,则根据该查询条件中的一级属性查找该目标数据库中匹配的记录,然后从匹配记录的一级属性中提取次级属性图并分别与该查询条件中的次级属性图进行匹配,并返回匹配结果。

    一种基于图遍历的SPARQL查询优化方法

    公开(公告)号:CN107291807B

    公开(公告)日:2020-10-16

    申请号:CN201710343003.9

    申请日:2017-05-16

    Abstract: 本发明公开了一种基于图遍历的SPARQL查询优化方法。本方法为:1)使用属性图表示RDF数据中三元组,然后利用Bigtable模型存储RDF数据,得到RDF数据对应的Bigtable数据;2)将SPARQL查询转化对RDF属性图的遍历;3)根据步骤2)获得的遍历序列,遍历Bigtable数据中满足条件的所有节点,完成SPARQL查询。本发明一方面消除了传统SPARQL查询对Hash等数据结构的依赖,减少了中间数据的产生,避免了大规模RDF数据的连接计算;另一方面,能有效利用基于Bigtable的大数据处理技术存储和管理RDF海量关联知识网络数据,加速RDF关联数据的查询和分析。

    一种融合图数据库和人工智能算法的数据管理方法及系统

    公开(公告)号:CN109597919A

    公开(公告)日:2019-04-09

    申请号:CN201811212493.X

    申请日:2018-10-18

    Abstract: 本发明公开了一种融合图数据库和人工智能算法的数据管理方法及系统。本方法为:1)查询请求处理模块接收用户发出的指令;所述指令包括Blob对象信息和处理该Blob对象的算法名称;2)查询请求处理模块根据该指令从图数据库中获取该Blob对象,并将该Blob对象和算法名称发送给人工智能模块;3)人工智能模块根据该算法名称调用相关算法对该Blob对象进行处理并将得到的处理结果返回给用户。本发明实现了数据管理工具自身的智能化、功能的丰富化,填补了在非结构化数据管理及相关领域的空白。

    一种支持非结构化数据存储与查询的图数据库管理系统

    公开(公告)号:CN109582831A

    公开(公告)日:2019-04-05

    申请号:CN201811202708.X

    申请日:2018-10-16

    Abstract: 本发明公开一种支持非结构化数据存储与查询的图数据库管理系统,包括:一基于Neo4j图数据库的带标签的Neo4j属性图模型,用于存储结构化数据和BLOB的非内容的属性信息,还存储分配BLOB的唯一ID;一支持BLOB类型的BLOB数据存储模型,包括抽象存储模型和具体存储模型,用于存储BLOB的内容,并维护BLOB的ID与BLOB的属性信息之间的映射关系;一查询模块,用于查询所存储的结构化数据和BLOB类型数据。本系统能够存储结构化数据和将非结构化数据存储为BLOB类型,并实现该两种数据的查询。

    一种通用的图数据在线交互式浏览分析方法

    公开(公告)号:CN109413187A

    公开(公告)日:2019-03-01

    申请号:CN201811294641.7

    申请日:2018-11-01

    Abstract: 本发明公开了一种通用的图数据在线交互式浏览分析方法。本方法为:设置若干接口,每一接口设置一用于交互的请求和响应;图数据前端与图数据后端之间通过各接口的请求与响应交互,图数据前端需要进行一设定功能处理时,通过该功能对应的接口i发送请求给图数据后端,图数据后端根据该请求生成对应的响应并通过接口i发送给图数据前端;所述请求为基于HTTP的POST实现,包含command参数和JSON参数,command参数用于指定需要进行的操作,JSON参数用于指明操作中会用到的相关参数;所述响应为基于HTTP响应,响应头中指定了响应体的内容为JSON参数,响应体包含图数据后端对图数据前端发出的操作指令处理结果。

    一种适用于多种大数据管理系统的数据模型转换及查询分析方法

    公开(公告)号:CN107491476A

    公开(公告)日:2017-12-19

    申请号:CN201710515379.3

    申请日:2017-06-29

    Abstract: 本发明涉及一种适用于多种大数据管理系统的数据模型转换及查询分析方法。该方法包括:1)建立关联文档模型,其包括文档集与关联集,关联集是文档之间的关联构成的集合;2)将数据的语义信息,将不同的原始数据模型转换为关联文档模型;3)将关联文档模型中的数据转换为分布式计算编程模型能够接受的数据结构,进而将关联文档模型转换为分布式计算编程模型。然后利用由关联文档模型转换得到的分布式计算编程模型,对来自不同原始数据模型的数据进行统一查询和分析。本发明能够实现对多源异构数据源的统一访问、查询与分析。

    一种基于大语言模型的异构数据库模式集成方法及系统

    公开(公告)号:CN118885522A

    公开(公告)日:2024-11-01

    申请号:CN202410846630.4

    申请日:2024-06-27

    Abstract: 本发明公开一种基于大语言模型的异构数据库模式集成方法及系统,属于大数据技术领域。所述方法包括:基于大语言模型将异构数据库模式转换为统一的中间表示;其中,所述中间表示的结构为图结构;基于大语言模型将多个中间表示合并为一个数据库模式并输出。本发明通过大语言模型对不同数据库模式进行自动理解、映射和整合,实现数据的统一集成和管理,提高数据集成的效率和准确性,降低维护成本。

    一种面向文档型数据库的图查询方法、系统、装置及介质

    公开(公告)号:CN117932078A

    公开(公告)日:2024-04-26

    申请号:CN202311761090.1

    申请日:2023-12-20

    Abstract: 本发明公开了一种面向文档型数据库的图查询方法、系统、装置及介质,及图数据、大数据技术、数据库技术等领域,本发明将文档映射为图模型节点,将文档中的引用映射为图模型关系,将文档中的字段和值映射为图模型属性;根据用户的图查询请求的id、标签、属性条件或关联关系信息,在目标文档型数据库中查询节点或关系并返回给用户。本发明提供了一种全面的、可配置的面向文档型数据库的图查询的技术方案,具备灵活性、性能优化、安全性和可配置性等多重优点,能够满足各种复杂查询场景的需求。

Patent Agency Ranking