数据库分库分表方法、装置、电子设备和计算机存储介质

    公开(公告)号:CN117349284A

    公开(公告)日:2024-01-05

    申请号:CN202311316176.3

    申请日:2023-10-11

    Abstract: 本申请公开一种数据库分库分表方法、装置、电子设备和计算机存储介质,该方法包括:根据分库分表参数对数据库中的待分配数据进行切割并存储至切面中的切点;根据子数据库中数据表的第一字段,及切面中对应于第一字段的第二字段,确定子数据库与切面之间的路由字段;获取子数据库的数量信息和各子数据库中数据表的数量信息;根据路由字段对子数据库的数量信息,和各子数据库中数据表的数量信息进行扰动,获得扰动结果,并根据路由字段和扰动结果对切面中的切点进行存储。本申请由于分库分表后存在多个子数据库,因此提高了数据承载能力,在部分子数据库宕机时,其余子数据库依然可以正常运行。

    一种业务交互网络的预测方法及装置

    公开(公告)号:CN114519445A

    公开(公告)日:2022-05-20

    申请号:CN202011294355.8

    申请日:2020-11-18

    Abstract: 本公开涉及数据处理技术领域,尤其涉及一种业务交互网络的预测方法及装置,解决建立的业务交互网络不完整,以及无法对潜在的业务关系进行预测的问题,方法为:获取采集的各个业务数据,建立交互网络,再建立邻接矩阵和特征矩阵,再将所述邻接矩阵和所述特征矩阵,输入预测模型,得到业务交互预测矩阵,然后将所述业务交互预测矩阵中元素进行处理后,生成业务交互网络矩阵,并基于所述业务交互网络矩阵确定预测的业务交互网络。这样,采用业务数据生成的交互网络,预测业务交互网络,规避建立预测交互网络时,需要检索确定同种业务类型的全部交互对象,使得建立的业务交互网络不完整的弊端,而且能够预测出存在潜在交互可能的交互对象。

    数据扩充方法、装置、电子设备及存储介质

    公开(公告)号:CN117667206A

    公开(公告)日:2024-03-08

    申请号:CN202311714726.7

    申请日:2023-12-13

    Abstract: 本申请实施例提供了一种数据扩充方法、装置、电子设备及存储介质,该数据扩充方法包括:获取多个第一数据组,第一数据组包括第一指令、第一指令对应的参考数据和第一指令对应的结果数据;根据多个第一数据组中的第一指令,生成多个第二指令;根据各第二指令的指令类型,确定该第二指令对应的至少一个第二数据组,第二指令对应的第二数据组包括该第二指令、该第二指令对应的参考数据和该第二指令对应的结果数据,指令类型不同的任意两个第二指令对应的数据确定顺序不同;将多个第一数据组和多个第二数据组均确定为扩充后数据组。本方案使扩充后数据组较为多样化,以优化基于扩充后数据组进行模型训练的效果。

    一种数据抓取方法、装置及相关设备

    公开(公告)号:CN117370464A

    公开(公告)日:2024-01-09

    申请号:CN202311418679.1

    申请日:2023-10-30

    Abstract: 本申请提供一种数据抓取方法、装置及相关设备,通过构建离线数据同步平台,基于该平台的插件开发规范,分别创建电子表格数据读取插件、接口数据读取插件和数据写入插件;将创建的插件在离线数据同步平台中配置发布;基于电子表格数据读取插件和接口数据读取插件,通过离线数据同步平台的离线数据同步引擎对本地数据源的表格数据和Restful API数据源中的数据进行采集;利用数据写入插件将采集电子表格数据中的数据或Restful API数据源中的数据进行转换存储,同步更新到离线数据同步平台对应关联的目标数据库或数据池中。以使使数据离线平台能够对用户上传的电子报个文件和Restful API接口数据实现数据自动化采集,大大提高了数据的抓取效率。

    一种报表生成方法、装置及存储介质

    公开(公告)号:CN116049169A

    公开(公告)日:2023-05-02

    申请号:CN202211500690.8

    申请日:2022-11-28

    Abstract: 本申请公开了一种报表生成方法、装置及存储介质。涉及数据处理技术领域。该方法具体包括:电子设备获取处理数据集,其中,处理数据集存储于非关系型数据库MongoDB,且处理数据集中的数据的格式为json格式。然后,电子设备从预设的多个报表样式中确定第一报表样式,其中,多个报表样式存储于MongoDB,报表样式的相关信息的存储格式为json格式。电子设备根据第一报表样式对处理数据集进行统计,生成处理数据集的报表。该方法用以解决现有报表生成方式对于结构多变、查询修改频繁的数据来说,不易生成报表的问题。

    一种票务数据信息安全求交的方法、装置及相关设备

    公开(公告)号:CN115484104A

    公开(公告)日:2022-12-16

    申请号:CN202211132881.3

    申请日:2022-09-16

    Abstract: 本申请实施例提供一种票务数据信息安全求交的方法、装置及相关设备,包括:确定数据发送方的票务样本数据的摘要信息,根据摘要信息确定对应的标识公钥,将标识公钥发送给参与安全求交的数据选择方,接收数据选择方生成的第一密文矩阵,对第一密文矩阵进行解密,生成对应密文矩阵的第一伪明文矩阵,根据摘要信息对伪明文矩阵进行异或运算,生成第二密文矩阵,将第二密文矩阵发送个数据选择方,使数据选择方根据第二密文矩阵进行票务数据信息安全求交。本方法基于票务标识和国密算法,实现对票务数据的大规模不经意求交,无需在可信第三方证书支持下逐个对样本进行不经意传输,降低安全求交过程中的数据通信量,响应快、灵活可配置,适用性好。

    信息处理方法、装置、设备及介质

    公开(公告)号:CN114202418A

    公开(公告)日:2022-03-18

    申请号:CN202111502592.3

    申请日:2021-12-09

    Abstract: 本公开涉及一种信息处理方法、装置、设备及介质。一种信息处理方法,包括:获取社会实体集的交易图,该交易图包括所述社会实体集中各社会实体的基本信息和各社会实体间的交易关系;从交易图中,筛选获取包含目标社会实体的交易子图;通过链路预测模型从交易子图中确定要推荐的目标社会实体。由此,通过交易子图生成方法对各类社会实体推荐算法均能有效降低数据量,加速计算速度,并且通过链路预测模型进行社会实体推荐可以实现对社会实体交易网络的深度挖掘,提高推荐算法的准确性。

Patent Agency Ranking