-
公开(公告)号:CN119311660A
公开(公告)日:2025-01-14
申请号:CN202311427094.6
申请日:2023-10-30
Applicant: 华为云计算技术有限公司
IPC: G06F16/21 , G06F16/22 , G06F16/2458
Abstract: 一种数据处理方法及装置,应用于数据处理系统中的前端设备,数据处理系统还包括目标设备和数据库,目标设备用于采集目标设备运行过程中的多个时序数据,每个时序数据包括时序数据的采集时间。该方法包括:前端设备获取第一时序数据,判断第一时序数据是否是顺序数据。进一步的,前端设备在确定第一时序数据是顺序数据的情况下,将第一时序数据存储至数据库;或者,前端设备在确定第一时序数据是乱序数据的情况下,将第一时序数据存放至前端设备的排序缓存中。如此,避免前端设备将乱序数据存储至数据库而造成的对数据库性能的影响。
-
公开(公告)号:CN116860870A
公开(公告)日:2023-10-10
申请号:CN202310669122.9
申请日:2023-06-06
Applicant: 深圳华为云计算技术有限公司
IPC: G06F16/27 , G06F9/451 , G06F16/21 , G06F16/242
Abstract: 本申请提供了一种数据复制方法及装置。该方法包括数据复制装置响应于用户在配置界面对第一源库的数据复制条件编辑操作,获取第一sql复制语句,之后可以根据第一sql复制语句,将第一源库中的第一目标数据复制至第一源库对应的第一目标库中。如此,该方法使得用户在配置界面上进行灵活变更或灵活配置数据复制条件,可以满足用户的不同数据复制需求,有助于实现数据按需复制,且无需用户重启服务或修改配置或修改业务代码进行变更数据复制条件,使得数据复制在数据复制条件发生变更时也不会中断。此外,由于数据复制条件是持久化在对应的sql复制语句中,所以即使用户重启服务或数据复制出现异常情况等,也不会导致数据复制条件丢失。
-
公开(公告)号:CN118277478A
公开(公告)日:2024-07-02
申请号:CN202211659524.2
申请日:2022-12-22
Applicant: 华为云计算技术有限公司
Abstract: 本申请公开了一种处理数据库的方法、装置及存储介质,属于数据存储技术领域。所述方法应用于AP引擎包括的代理模块,AP引擎还包括多个目的数据库。在所述方法中,代理模块接收TP引擎发送的第一逻辑日志,TP引擎包括多个源数据库,该多个源数据库与该多个目的数据库对应,每个目的数据库分别包括每个目的数据库对应的源数据库中的数据,第一逻辑日志用于描述TP引擎处理第一数据库所使用的第一处理操作,该多个源数据库包括第一数据库。代理模块确定第一数据库对应的第二数据库,该多个目的数据库包括第二数据库。代理模块基于第一逻辑日志处理第二数据库。本申请能够减少网络资源的占用。
-
公开(公告)号:CN119557523A
公开(公告)日:2025-03-04
申请号:CN202410013895.6
申请日:2024-01-04
Applicant: 华为云计算技术有限公司
IPC: G06F16/957
Abstract: 本申请提供了,一种推荐预取页面的方法和装置,该方法包括:接受用户的查询请求,并根据查询请求读取数据库中的页面;获取包括N个页面序号的第一序列,N个页面序号按照数据库中被读取的N个页面被读取的时间顺序排列;根据提取窗口,提取第一序列的至少一个窗口序列的特征信息;获取包括K个页面序号的第二序列,K个页面序号按照数据库中被读取时间最晚的K个页面被读取的时间顺序排列;根据至少一个窗口序列的特征信息和第二序列,确定缓存的至少一个预取页面的页面序号。上述方法通过提取历史被读取页面序列的特征,并与当前被读取页面序列比较,使得预取页面能够根据历史被读取页面序列确定,从而提高推荐预取页面的准确性。
-
公开(公告)号:CN117951141A
公开(公告)日:2024-04-30
申请号:CN202211298222.7
申请日:2022-10-21
Applicant: 华为云计算技术有限公司
IPC: G06F16/23 , G06F16/22 , G06F16/215 , G06F9/46 , G06F16/2453
Abstract: 本申请公开了一种数据处理方法及装置,属于数据库技术领域。分析处理引擎获取来自事务处理引擎的增量数据。分析处理引擎根据增量数据更新存储表。该存储表采用列式存储格式。该存储表包括数据信息列和有效性指示信息列。增量数据以数据行的形式存储在数据信息列中。有效性指示信息列用于指示数据信息列中的数据行有效或无效。分析处理引擎可基于有效性指示信息列过滤数据信息列中的无效数据行而读取数据信息列中的有效数据行,从而实现快速数据去重,有效性指示信息列的数据量较小且能够实现对数据有效性的快速更新,节约了存储资源且提高了数据时效性。
-
公开(公告)号:CN116775373A
公开(公告)日:2023-09-19
申请号:CN202310618758.0
申请日:2023-05-29
Applicant: 深圳华为云计算技术有限公司
Abstract: 一种数据校验方法包括:接收第一计算装置发送的物理日志后,当物理日志包括主数据库的页面修改数据以及主数据库中修改后页面的校验和时,根据主数据库的页面修改数据对备用数据库的页面进行修改;计算备用数据库中修改后页面的校验和;根据备用数据库中修改后页面的校验和与主数据库中修改后页面的校验和判断主数据库的页面与备用数据库的页面是否一致。由于每个页面是独立的,因此可以对每个页面单独修改和校验,通过多个页面的并发校验能够显著提高校验效率。本申请还提供能够实现上述数据校验方法的计算装置。
-
-
-
-
-