公开(公告)号：CN117951141A

公开(公告)日：2024-04-30

申请号：CN202211298222.7

申请日：2022-10-21

Applicant: 华为云计算技术有限公司

Inventor： 康祥 ,  宋立勇 ,  蔺若林 ,  斯蒂格·巴肯 ,  符文·洪博斯塔德

IPC: G06F16/23 ,  G06F16/22 ,  G06F16/215 ,  G06F9/46 ,  G06F16/2453

Abstract: 本申请公开了一种数据处理方法及装置，属于数据库技术领域。分析处理引擎获取来自事务处理引擎的增量数据。分析处理引擎根据增量数据更新存储表。该存储表采用列式存储格式。该存储表包括数据信息列和有效性指示信息列。增量数据以数据行的形式存储在数据信息列中。有效性指示信息列用于指示数据信息列中的数据行有效或无效。分析处理引擎可基于有效性指示信息列过滤数据信息列中的无效数据行而读取数据信息列中的有效数据行，从而实现快速数据去重，有效性指示信息列的数据量较小且能够实现对数据有效性的快速更新，节约了存储资源且提高了数据时效性。

公开(公告)号：CN116860870A

公开(公告)日：2023-10-10

申请号：CN202310669122.9

申请日：2023-06-06

Applicant: 深圳华为云计算技术有限公司

Inventor： 宋立勇 ,  朱冠宇 ,  斯蒂格·巴肯

IPC: G06F16/27 ,  G06F9/451 ,  G06F16/21 ,  G06F16/242

Abstract: 本申请提供了一种数据复制方法及装置。该方法包括数据复制装置响应于用户在配置界面对第一源库的数据复制条件编辑操作，获取第一sql复制语句，之后可以根据第一sql复制语句，将第一源库中的第一目标数据复制至第一源库对应的第一目标库中。如此，该方法使得用户在配置界面上进行灵活变更或灵活配置数据复制条件，可以满足用户的不同数据复制需求，有助于实现数据按需复制，且无需用户重启服务或修改配置或修改业务代码进行变更数据复制条件，使得数据复制在数据复制条件发生变更时也不会中断。此外，由于数据复制条件是持久化在对应的sql复制语句中，所以即使用户重启服务或数据复制出现异常情况等，也不会导致数据复制条件丢失。