-
公开(公告)号:CN119988363A
公开(公告)日:2025-05-13
申请号:CN202510103571.6
申请日:2025-01-22
Applicant: 上海上湖信息技术有限公司
IPC: G06F16/215 , G06F16/27 , G06F16/22 , G06F16/25 , G06F16/23 , G06F18/241
Abstract: 本申请涉及数据处理技术领域,尤其涉及一种针对多种数据源的数据集成方法、装置、设备及介质,该方法获取任意一种待集成数据源的结构信息和待集成数据源的数据类型;根据结构信息确定待集成数据源对应的临时表的主键;根据数据类型确定临时表的存储格式;将待集成数据源中的每条数据按照对应的主键值存储到临时表中;针对临时表中的任一数据对应的主键值,将临时表中的主键值对应的数据保存至最终集成表中,或根据临时表中的主键值对应的数据,对最终集成表中的主键值对应的数据进行更新,解决在数据仓库ODS层数据存储冗余的问题,增强数据可读性。