一种时序数据库的实时流数据处理方法及装置

    公开(公告)号:CN113051281A

    公开(公告)日:2021-06-29

    申请号:CN202110611290.3

    申请日:2021-06-02

    Abstract: 本发明公开了一种时序图形数据库存储方法及装置,主要解决现有图形数据库无法存储空间网络复杂数据的问题。该一种时序图形数据库存储方法为将图形数据库中结点和边的Key‑Value形式分别加上时序数据库中时间戳TimeStamp,分别得到具有时间戳TimeStamp的结点和边;然后将具有时间戳TimeStamp的结点和边转换为结点表和边表;最后根据具有时间戳TimeStamp的结点和边的属性分别进行自定义划分用于查询。通过上述方案,本发明达到了适用于空间网络数据存储场景目的。

    数据存储方法及装置
    2.
    发明授权

    公开(公告)号:CN109992531B

    公开(公告)日:2020-11-10

    申请号:CN201910301133.5

    申请日:2019-04-15

    Abstract: 本申请公开了一种数据存储方法及装置,能够在集群开启高可用的情况下,正常地进行数据存储。本申请应用于集群系统的管理端,其具体方案为:首先获取集群的集群标识以及所述集群中服务节点的访问地址,所述服务节点为该集群中当前执行操作的节点,并将所述集群标识以及所述访问地址的对应关系存储至虚拟解析服务器中;然后在需要存储数据的情况下,接收数据存储请求并从所述存储请求中获取待访问的目标集群的集群标识,再根据目标集群的集群标识,从所述虚拟解析服务器中获取与所述目标集群对应的访问地址,最后根据所述访问地址存储数据。

    参数校验方法及装置
    4.
    发明公开

    公开(公告)号:CN110162309A

    公开(公告)日:2019-08-23

    申请号:CN201910451267.5

    申请日:2019-05-28

    Abstract: 本申请提供的参数校验方法及装置,应用于数据处理设备。该数据处理设备配置有Hbase数据库,其中,该Hbase数据库包括有对数据库操作指令的操作参数进行校验的Java代码片段,该Java代码片段中包括预设英文字符、符号字符以及中文字符的Unicode编码范围。通过该Java代码片段对获取到byte数组类型的数据库操作参数转换成char数组类型。依次获取char数组中的数据,转换成相应的整数,将该整数同Unicode编码范围进行比较,进而判断该操作是为合法字符。如此,使得用户可以直接通过中文建表,提高了用户体验。

    获取中文数据库结构的方法及装置

    公开(公告)号:CN109992577A

    公开(公告)日:2019-07-09

    申请号:CN201910293497.3

    申请日:2019-04-12

    Abstract: 本申请公开了获取中文数据库结构的方法及装置,应用于计算机设备,所述方法包括:获取当前被使用数据库的hive源码,将hive源码中涉及字符获取的部分进行修改,得到能够对中文字符进行识别、获取的目标hive源码。将目标hive源码进行编译后得到能够对中文字符进行处理的目标hive文件包。将目标hive文件包上传并覆盖原本的不能处理中文字符的hive文件包,重启数据库的hive服务,得到能够识别显示中文的中文数据库结构。采用本申请提供的获取中文数据库结构的方法,能够在基于hive搭建的数据库中使用中文,提高了数据库的使用效率。

    增量数据采集方法、装置及系统

    公开(公告)号:CN109634937A

    公开(公告)日:2019-04-16

    申请号:CN201811561133.0

    申请日:2018-12-20

    Abstract: 本申请提供的增量数据采集方法、装置及系统,通过提供一个可视化的配置界面。用户在所述配置界面输入需要监听的数据库,以及数据库中的表和字段。增量数据采集设备获取该配置请求,根据所述配置请求部署相应的增量监听环境,同时根据所述配置请求,配置相应的数据库,使得所述数据库在发生增量事件时,发送相应的增量数据。所述增量监听环境获取所述增量数据,并对所述增量数据做进一步的处理。本申请公开的技术方案使得用户只需要在配置界面进行简单的配置操作就可以对数据库的增量事件进行监听。降低了用户的使用门槛,提高了工作效率。

    一种数据处理方法及装置

    公开(公告)号:CN109460408A

    公开(公告)日:2019-03-12

    申请号:CN201811269590.2

    申请日:2018-10-29

    Abstract: 在本申请实施例提供的数据处理方法及装置中,包括:根据预先设置的自定义语句,建立Spark与HBase表之间的通路;通过Spark获取HBase表的第一表项信息,根据预先存储的类型替换关系,将所述第一表项信息转换为第二表项信息;根据所述第二表项信息,通过Spark在Hive创建所述HBase表的映射表,记为Hive表。本申请实施例提供的数据处理方法可以根据预先设置的自定义语句建立Spark与HBase表的通路,然后通过Spark从HBase表获取表项信息,并对表项信息进行符合Spark格式需求的转换,从而通过Spark在Hive创建所述HBase表的映射表,该映射表既能从HBase表获取信息,又具有Spark系统数据分析速度快的优点。

    一种时序图形数据库存储方法及装置

    公开(公告)号:CN113127660A

    公开(公告)日:2021-07-16

    申请号:CN202110566530.2

    申请日:2021-05-24

    Abstract: 本发明公开了一种时序图形数据库存储方法及装置,主要解决现有图形数据库无法存储空间网络复杂数据的问题。该一种时序图形数据库存储方法为将图形数据库中结点和边的Key‑Value形式分别加上时序数据库中时间戳TimeStamp,分别得到具有时间戳TimeStamp的结点和边;然后将具有时间戳TimeStamp的结点和边转换为结点表和边表;最后根据具有时间戳TimeStamp的结点和边的属性分别进行自定义划分用于查询。通过上述方案,本发明达到了适用于空间网络数据存储场景目的。

    数据处理方法及系统
    9.
    发明授权

    公开(公告)号:CN109684093B

    公开(公告)日:2021-03-09

    申请号:CN201811585365.X

    申请日:2018-12-24

    Abstract: 本申请实施例提供一种数据处理方法及系统。该方法包括:计算设备将接收到的数据获取请求中的目标数据表标识及目标数据特征发送给查询设备;查询设备根据存储的元数据库中的数据表的数据表标识及对应的计算设备标识,查询得到与目标数据表标识对应的目标计算设备标识,并将目标数据表标识及目标数据特征发送给与目标计算设备标识对应的目标计算设备,以经目标计算设备获得目标位置信息;计算设备根据由查询设备发送的目标位置信息从对应的目标存储设备处获得目标数据,并将根据数据获取请求对目标数据进行处理后得到的处理结果发送请求设备。由此,通过将计算资源及存储资源分离,可保证计算任务按照正常进度进行。

    函数动态创建方法、装置及电子设备

    公开(公告)号:CN109992259B

    公开(公告)日:2020-10-30

    申请号:CN201910300273.0

    申请日:2019-04-15

    Abstract: 本申请实施例提供一种函数动态创建方法、装置及电子设备,在获取的存储过程的SQL语句中包含函数创建语句及存储过程创建语句时,分别对函数创建语句及存储过程创建语句进行解析生成对应的第一java文件及第二java文件,再分别对其进行编译得到第一可执行文件和第二可执行文件,最后将第一可执行文件和第二可执行文件加载至内存中。如此,可在创建存储过程中动态创建自定义函数,便于后续存储过程对自定义函数的调用,并且基于java代码的通用性,java类的自定义函数及存储过程可支持跨平台的使用。

Patent Agency Ranking