参数校验方法及装置
    12.
    发明公开

    公开(公告)号:CN110162309A

    公开(公告)日:2019-08-23

    申请号:CN201910451267.5

    申请日:2019-05-28

    Abstract: 本申请提供的参数校验方法及装置,应用于数据处理设备。该数据处理设备配置有Hbase数据库,其中,该Hbase数据库包括有对数据库操作指令的操作参数进行校验的Java代码片段,该Java代码片段中包括预设英文字符、符号字符以及中文字符的Unicode编码范围。通过该Java代码片段对获取到byte数组类型的数据库操作参数转换成char数组类型。依次获取char数组中的数据,转换成相应的整数,将该整数同Unicode编码范围进行比较,进而判断该操作是为合法字符。如此,使得用户可以直接通过中文建表,提高了用户体验。

    获取中文数据库结构的方法及装置

    公开(公告)号:CN109992577A

    公开(公告)日:2019-07-09

    申请号:CN201910293497.3

    申请日:2019-04-12

    Abstract: 本申请公开了获取中文数据库结构的方法及装置,应用于计算机设备,所述方法包括:获取当前被使用数据库的hive源码,将hive源码中涉及字符获取的部分进行修改,得到能够对中文字符进行识别、获取的目标hive源码。将目标hive源码进行编译后得到能够对中文字符进行处理的目标hive文件包。将目标hive文件包上传并覆盖原本的不能处理中文字符的hive文件包,重启数据库的hive服务,得到能够识别显示中文的中文数据库结构。采用本申请提供的获取中文数据库结构的方法,能够在基于hive搭建的数据库中使用中文,提高了数据库的使用效率。

    增量数据采集方法、装置及系统

    公开(公告)号:CN109634937A

    公开(公告)日:2019-04-16

    申请号:CN201811561133.0

    申请日:2018-12-20

    Abstract: 本申请提供的增量数据采集方法、装置及系统,通过提供一个可视化的配置界面。用户在所述配置界面输入需要监听的数据库,以及数据库中的表和字段。增量数据采集设备获取该配置请求,根据所述配置请求部署相应的增量监听环境,同时根据所述配置请求,配置相应的数据库,使得所述数据库在发生增量事件时,发送相应的增量数据。所述增量监听环境获取所述增量数据,并对所述增量数据做进一步的处理。本申请公开的技术方案使得用户只需要在配置界面进行简单的配置操作就可以对数据库的增量事件进行监听。降低了用户的使用门槛,提高了工作效率。

    数据处理方法及系统
    15.
    发明授权

    公开(公告)号:CN109684093B

    公开(公告)日:2021-03-09

    申请号:CN201811585365.X

    申请日:2018-12-24

    Abstract: 本申请实施例提供一种数据处理方法及系统。该方法包括:计算设备将接收到的数据获取请求中的目标数据表标识及目标数据特征发送给查询设备;查询设备根据存储的元数据库中的数据表的数据表标识及对应的计算设备标识,查询得到与目标数据表标识对应的目标计算设备标识,并将目标数据表标识及目标数据特征发送给与目标计算设备标识对应的目标计算设备,以经目标计算设备获得目标位置信息;计算设备根据由查询设备发送的目标位置信息从对应的目标存储设备处获得目标数据,并将根据数据获取请求对目标数据进行处理后得到的处理结果发送请求设备。由此,通过将计算资源及存储资源分离,可保证计算任务按照正常进度进行。

    函数动态创建方法、装置及电子设备

    公开(公告)号:CN109992259B

    公开(公告)日:2020-10-30

    申请号:CN201910300273.0

    申请日:2019-04-15

    Abstract: 本申请实施例提供一种函数动态创建方法、装置及电子设备,在获取的存储过程的SQL语句中包含函数创建语句及存储过程创建语句时,分别对函数创建语句及存储过程创建语句进行解析生成对应的第一java文件及第二java文件,再分别对其进行编译得到第一可执行文件和第二可执行文件,最后将第一可执行文件和第二可执行文件加载至内存中。如此,可在创建存储过程中动态创建自定义函数,便于后续存储过程对自定义函数的调用,并且基于java代码的通用性,java类的自定义函数及存储过程可支持跨平台的使用。

    数据跨库访问方法及装置
    17.
    发明授权

    公开(公告)号:CN109669980B

    公开(公告)日:2020-09-18

    申请号:CN201811575160.3

    申请日:2018-12-21

    Abstract: 本申请提供一种数据跨库访问方法及装置。所述方法包括:接收来自用户终端的数据访问请求,并解析得到所有目标数据库标识,及每个目标数据库标识对应的目标数据特征;在存储的所有Hive数据映射表中查找目标数据库标识对应的目标映射表;当查找到时,在目标映射表中查询与目标数据特征对应的特征信息;访问安装有与该目标映射表对应的数据库的目标服务器,并获取与查询到的特征信息匹配的目标获取数据;在得到所有目标映射表各自对应的目标获取数据后,对所有目标获取数据进行数据整理,并将整理得到的数据结果反馈给用户终端。所述方法能够实现多个数据库之间的数据跨库关联访问,提高整体的数据获取及时性,确保大数据分析的实现进度。

    一种基于数据仓库的数据开发方法及系统

    公开(公告)号:CN111259068A

    公开(公告)日:2020-06-09

    申请号:CN202010346796.1

    申请日:2020-04-28

    Abstract: 本发明公开了一种基于数据仓库的数据开发方法及系统,包括以下步骤:S1、将元数据加载到hive中;S2、在hive上进行数据开发;S3、将步骤S2中数据开发的结果表同步到目标数据库中。本方案通过将元数据加载到hive中,在通过现有的python、SQL等技术在hive上进行数据开发,由于python、SQL等技术是较为现有的技术,因此,技术人员可以根据项目的实际情况对数据开发的流程进行配置调整,同时所需要使用的组件大部分是开源社区免费支持的,各组件可以较为便捷升级版本,达到更好的性能和功能的提升。解决了现有的数据库开发平台扩展性、适应性较差的问题。

    一种动态OID推送数据采集方法及装置

    公开(公告)号:CN111209405A

    公开(公告)日:2020-05-29

    申请号:CN202010319483.7

    申请日:2020-04-22

    Abstract: 本发明公开了一种动态OID推送数据采集方法及装置,基于SNMP OID数据采集管理系统,现有方案依靠手动配置OID信息进行数据的采集,一方面会加重用户的工作量,配置易出错;另一方面不够灵活,不能根据系统实际运行情况进行动态OID推荐,易出现对系统监控不完善,监控行为刻板的缺点。本方案根据每次请求的OID返回的数据集进行建模、消除人工干预,同时根据模型预测出相关联的OID进行OID动态推送,弥补了单纯使用手动进行配置OID的缺陷;本方案是构建智能运维分析系统必不可少的环节之一。

    一种基于时序数据的统计指标存储方法及装置

    公开(公告)号:CN111209285A

    公开(公告)日:2020-05-29

    申请号:CN202010324453.5

    申请日:2020-04-23

    Abstract: 本发明公开了一种基于时序数据的统计指标存储方法及装置,在将时序数据写入时序数据库的同时计算时序数据的统计指标,将时序数据的统计指标计算结果写入KV引擎。本方案会在时序数据入库时提前计算所有统计指标,并把统计指标按照时序来进行入库存储,每次查询指标不必再读取原始时序数据,能够大大提升时序数据统计指标的查询,减少计算资源的消耗。解决了现有时序数据进行统计指标计算时需要大量的读I/O去读取原始数据,消耗系统资源且没有对统计数据的进行有效管理和保存,每次都需要重新去读取原始数据来计算的问题。

Patent Agency Ranking