公开(公告)号：CN113961755A

公开(公告)日：2022-01-21

申请号：CN202111049936.X

申请日：2021-09-08

Applicant: 南湖实验室

Inventor： 刘昊 ,  罗威 ,  刘友良 ,  谭玉珊 ,  张涛 ,  陈志凌 ,  王朋 ,  王秋烨 ,  陈巍 ,  郁晨熹

IPC: G06F16/901

Abstract: 本发明提供了一种基于持久内存的图数据存储架构，包括支持图数据查询与存储并行的混合内存架构，且所述的混合内存架构包括动态随机存储和持久内存，由所述的动态随机存储提供查询内存，由所述的持久内存提供存储内存，且所述的动态随机存储和持久内存分别连接于图数据库系统的内存总线以构建混合内存架构。该架构实现了图数据库直接部署与运行在持久内存之上，该架构有别于传统的图数据库系统，使得基于该架构下实现的持久内存图数据库不再依赖底层文件系统运行，减少了软件栈的层级。

公开(公告)号：CN113961754A

公开(公告)日：2022-01-21

申请号：CN202111049920.9

申请日：2021-09-08

Applicant: 南湖实验室

Inventor： 刘昊 ,  罗威 ,  张磊 ,  刘友良 ,  谭玉珊 ,  张涛 ,  陈志凌 ,  郁晨熹 ,  王秋烨 ,  王朋 ,  陈巍

IPC: G06F16/901

Abstract: 本发明提供了一种基于持久内存的图数据库系统，包括计算层和存储层，所述的存储层包括具有图数据存储模型的图数据库和存储架构，在图数据存储模型中，图被划分为独立的节点集和独立的边集，且节点集和边集之间没有交集，节点集中的每个节点均具有一个唯一的节点地址，边集中的每个边均有唯一的边地址；所述的存储架构包括持久内存。本方案优化图数据存储模型，提出了一种新的基于集合的图数据存储模型，与传统的基于邻接矩阵和邻接链表的图数据存储模型有着本质的不同和全新的视角，通过该模型能够严格反映图数据的数学定义，有效地保存数据之间的关系，与现有的图数据存储模型相比，具有更好的时空效率。

公开(公告)号：CN113961753A

公开(公告)日：2022-01-21

申请号：CN202111049100.X

申请日：2021-09-08

Applicant: 南湖实验室

Inventor： 刘昊 ,  罗威 ,  张磊 ,  刘友良 ,  谭玉珊 ,  张涛 ,  陈志凌 ,  王朋 ,  王秋烨 ,  郁晨熹 ,  陈巍

IPC: G06F16/901

Abstract: 本发明提供了一种基于集合的图数据存储模型及其图数据库，在本图数据存储模型中，图被划分为独立的节点集和独立的边集，且节点集和边集之间没有交集，节点集中的每个节点均具有唯一的节点地址和唯一的节点ID，边集中的每个边均具有唯一的边地址和唯一的边ID。该模型能够严格反映图数据的数学定义，有效地保存数据之间的关系，与现有的最新图数据存储模型相比具有更好的时空效率。

公开(公告)号：CN114510522B

公开(公告)日：2025-03-11

申请号：CN202210030132.3

申请日：2022-01-12

Applicant: 南湖实验室 ,  北京大数据先进技术研究院

Inventor： 刘昊 ,  王秋烨 ,  谭玉珊 ,  张磊 ,  张涛 ,  陈志凌 ,  陈巍 ,  王朋 ,  郁晨熹 ,  刘荫隆 ,  刘哲峰

IPC: G06F16/25 ,  G06F16/27 ,  G06F16/28

Abstract: 本发明提供了一种基于数据分类的数据总线，数据总线按照数据结构种类被划分为多个数据空间，每一类数据结构对应一个数据空间，每个数据空间对应一个接口基类和多个接口子类，各接口子类通过继承相应数据空间中的接口基类进行本数据总线与相应数据结构种类的子类数据结构之间的对接。在数据总线中按照数据结构种类划分数据空间，每个数据空间对应于多种子类型数据结构，用户在操作数据时，只需要区分数据属于哪一大类，无需细分到具体的数据类别，方便用户的使用，同时方便用户扩展新的数据类型，无需进行重写。

公开(公告)号：CN114528337B

公开(公告)日：2024-03-15

申请号：CN202210029808.7

申请日：2022-01-12

Applicant: 南湖实验室 ,  北京大数据先进技术研究院

Inventor： 刘昊 ,  程瑾 ,  罗威 ,  张涛 ,  王秋烨 ,  陈志凌 ,  陈巍 ,  郁晨熹 ,  王朋 ,  刘哲峰 ,  刘荫隆

IPC: G06F16/25 ,  G06F8/36 ,  G06F16/28

Abstract: 本发明公开了一种面向多源异构数据源的接口系统、通用接口及其实现方法，以面向多源异构数据源的通用接口实现方法为基础，包括：新建一个工程，并在工程内建立一个通用接口；在通用接口中建立相互独立的数据集合和操作集合；其中，数据集合被定义为能够被具体数据类型继承，且包括数据基类和继承数据基类的二级数据类；操作集合包括操作基类和继承操作基类的二级操作类；且所述的二级操作类被定义有其适用的具体数据类型以实现数据集合与操作集合的解耦与正交。通用接口中数据和操作形成两个独立的集合，并将操作抽象为接口，实现数据与操作的解耦和正交，使数据和操作能够自由地组合，实现操作的复用。

公开(公告)号：CN116340317A

公开(公告)日：2023-06-27

申请号：CN202310272727.4

申请日：2023-03-21

Applicant: 南湖实验室

Inventor： 刘昊 ,  刘荫隆 ,  陈巍 ,  王秋烨 ,  王朋 ,  郁晨熹 ,  刘哲峰 ,  陈志凌 ,  张涛 ,  王琪

IPC: G06F16/22 ,  G06F16/242 ,  G06F18/25

Abstract: 本方案公开了一种基于Elasticsearch实现DeltaLake数据湖索引的方法，入湖时，Spark对源数据进行抽取，对抽取出的数据集进行Schema分析，同时增加数据存储地址信息组成索引结构，实现入湖过程中，针对不同数据源的数据，如果用户未选择创建索引的列，由系统自动推断索引结构，实现基于数据源种类的天然分类。搜索时，不同源数据具有不同的索引结构，源数据因此被分类，查询过程中，根据用户指定在某一类或几类数据范围内进行查询，指定某一类数据进行快速查询。本方案针对Delta Lake数据湖引入Elasticsearch，实现了Elasticsearch与Delta Lake有机结合。在数据入湖过程中，异步建立索引，在数据搜索过程中，只需要关键字，就能迅速定位到已经建立索引的数据的位置，进而快速抓取到需要的数据。