公开(公告)号：CN116501731A

公开(公告)日：2023-07-28

申请号：CN202210061412.0

申请日：2022-01-19

Applicant: 华为云计算技术有限公司 ,  中国人民大学

Inventor： 韩瑞琛 ,  张延松 ,  任波 ,  刘专

IPC: G06F16/22 ,  G06F16/2455 ,  G06F16/25 ,  G06F16/27

Abstract: 本申请提供了一种数据处理方法及相关装置，本申请中，首先获取第一数据表和第二数据表。第一数据表和第二数据表均包括第一键值，第一数据表中的第一行数据包括第一键值，第二数据表中的第二行数据包括第一键值。将第一数据表存储至N个目标节点，其中，具有关联性的第一行数据和第二行数据存储至同一个目标节点上，则目标节点上的CPU可以避免进行远端访问，在该目标节点内完成对于第一行数据和第二行数据的访问，降低远端访问发生的频次，进而降低了访问数据产生的延迟，进一步提升了访问数据的速率，处理业务的速率高。

公开(公告)号：CN116501539A

公开(公告)日：2023-07-28

申请号：CN202210061367.9

申请日：2022-01-19

Applicant: 华为云计算技术有限公司 ,  中国人民大学

Inventor： 柴云鹏 ,  任波 ,  骆远辉 ,  黄人煌 ,  王元桢

IPC: G06F11/14 ,  G06F16/23 ,  G06F16/27

Abstract: 本申请公开了一种数据处理的方法及相关装置，第一设备获取事务表，事务表用于指示事务的状态以及日志链的存储地址，每个事务对应一个日志链，日志链包括至少一个链节点，每个链节点指示事务中的一个元组的存储地址；第一设备根据事务表获取待恢复事务的日志链，其中，事务表中处于undo状态的事务为待恢复事务；第一设备根据待恢复事务的日志链确定待恢复事务的元组的存储地址，以获取待恢复事务的元组；第一设备删除待恢复事务的日志链和元组。本申请中，可以通过事务表查询到待恢复事务，并根据该待恢复事务的日志链获取到该待恢复事务的元组，从而不需要对第一设备进行全表扫描，提高了数据恢复、数据处理的效率。

公开(公告)号：CN116204525A

公开(公告)日：2023-06-02

申请号：CN202111450362.7

申请日：2021-11-30

Applicant: 华为云计算技术有限公司 ,  中国人民大学

Inventor： 李翠平 ,  陈红 ,  刘鹏举 ,  李好洋 ,  王天一 ,  刘欢 ,  孙路明 ,  任波

IPC: G06F16/22

Abstract: 本申请实施例提供了一种数据库分区方法及相关装置，该方法包括：获取对数据表的查询信息，该查询信息包括多条查询中每条查询访问的属性；基于该查询信息生成亲和度矩阵，该亲和度矩阵指示该数据表包括的属性之间的亲和度；基于该亲和度矩阵对该数据表划分，获得该数据表的第一分区结果；其中，该第一分区结果包括N个分区，该N个分区中的每个分区包括该数据表的一个或多个属性，该N为大于1的整数。本申请能够降低垂直分区算法的时间复杂度。

公开(公告)号：CN118193560A

公开(公告)日：2024-06-14

申请号：CN202211565695.9

申请日：2022-12-07

Applicant: 华为云计算技术有限公司

Inventor： 钟延辉 ,  纪祥虎 ,  曾凯 ,  王传廷 ,  张文亮 ,  任波 ,  黄海燕

IPC: G06F16/242 ,  G06F16/28 ,  G06F16/2453 ,  G06F16/2455

Abstract: 本申请提供了一种数据分析方法，由数据分析系统执行，该系统包括协调节点、元数据管理装置和多个计算集群，计算集群中包括元数据缓存，元数据管理装置中记录有元数据缓存的状态，该方法包括：协调节点接收查询语句，向元数据管理装置下发一致性判断请求，元数据管理装置根据元数据缓存的状态，获得至少一个计算集群的元数据缓存的一致性判断结果，然后向协调节点返回一致性判断结果，接着根据一致性判断结果，从多个计算集群中确定目标计算集群，目标计算集群根据协调节点下发的分析请求，进行数据分析。由于无需在下发的执行计划中携带元数据，降低网络诉求。并且，基于一致性判断结果可以精准获取数据，减少同步次数，降低网络诉求。