公开(公告)号：CN117216326A

公开(公告)日：2023-12-12

申请号：CN202311250232.8

申请日：2023-09-25

Applicant: 支付宝(杭州)信息技术有限公司

Inventor： 黄超傑 ,  阮宏博 ,  李明尧

IPC: G06F16/901 ,  G06F16/215 ,  G06F16/22

Abstract: 本公开提供一种无效数据表的识别方法、装置、设备及存储介质，该方法中，响应于识别请求，获取基于数据表集合中的数据表和数据表之间的生产关系创建的有向图；有向图中各个节点表示数据表集合中的各个数据表；有向图中有向边表示该有向边连接的节点对应的数据表之间的生产关系；遍历有向图，搜索出有向图中包含的携带有效访问属性信息的有效访问节点，并将搜索到的有效访问节点和有向图的根节点之间的路径上的所有节点确定为有效链路节点；有效访问属性信息用于表示与该有效访问节点对应的数据表的数据所有者，在预设时长范围内针对该数据表进行了访问；将有向图中除有效链路节点之外的其他各个节点对应的数据表，确定为待清理的无效数据表。

公开(公告)号：CN117076465B

公开(公告)日：2024-04-05

申请号：CN202311344151.4

申请日：2023-10-16

Applicant: 支付宝(杭州)信息技术有限公司

Inventor： 张庭 ,  阮宏博 ,  黄超傑

IPC: G06F16/22 ,  G06F16/245 ,  G06F16/27

Abstract: 本说明书提供了一种数据关联查询方法及相关设备。数据关联查询系统中包括分布式地存储了第一数据表的多个第一计算节点，以及分布式地存储了第二数据表的多个第二计算节点。该方法应用于多个第一计算节点中的任一第一计算节点，包括：确定与针对第一数据表和第二数据表的数据关联查询相关的关联键，从第一数据表中与关联键对应的关联键值中确定出至少一个热点键值；将至少一个热点键值发送至多个第二计算节点，以使多个第二计算节点基于至少一个热点键值从第二数据表中拆分出热点数据表；热点数据表包含了第二数据表中与热点键值对应的热点数据记录；在本地存储第二计算节点发送的热点数据表；基于存储的第一数据表和热点数据表进行数据关联查询。

公开(公告)号：CN117076465A

公开(公告)日：2023-11-17

申请号：CN202311344151.4

申请日：2023-10-16

Applicant: 支付宝(杭州)信息技术有限公司

Inventor： 张庭 ,  阮宏博 ,  黄超傑

IPC: G06F16/22 ,  G06F16/245 ,  G06F16/27

Abstract: 本说明书提供了一种数据关联查询方法及相关设备。数据关联查询系统中包括分布式地存储了第一数据表的多个第一计算节点，以及分布式地存储了第二数据表的多个第二计算节点。该方法应用于多个第一计算节点中的任一第一计算节点，包括：确定与针对第一数据表和第二数据表的数据关联查询相关的关联键，从第一数据表中与关联键对应的关联键值中确定出至少一个热点键值；将至少一个热点键值发送至多个第二计算节点，以使多个第二计算节点基于至少一个热点键值从第二数据表中拆分出热点数据表；热点数据表包含了第二数据表中与热点键值对应的热点数据记录；在本地存储第二计算节点发送的热点数据表；基于存储的第一数据表和热点数据表进行数据关联查询。