公开(公告)号：CN117336382A

公开(公告)日：2024-01-02

申请号：CN202311432974.2

申请日：2023-10-31

Applicant: 南威软件股份有限公司

Inventor： 吴志雄 ,  吴发贵 ,  程炎 ,  颜伟进 ,  林琼英

IPC: H04L69/14 ,  H04L69/18 ,  H04L67/145

Abstract: 本发明涉及一种基于RMI的跨网多协议链式传输方法，其特征在于：客户端注册通道，并提前配置的链路与通道信息，服务端间的请求将按照预定的链路信息并通过注册的通道进行传输；在通讯传输中，客户端根据配置的链路信息将请求转发至对应服务端，服务端将根据链路信息判断通道链路是否结束，若没有结束则继续向下一级服务端转发请求，否则将执行本地请求并回传结果。本发明将服务通讯过程链式化，将通讯过程抽离业务，无需关心具体实现原理，通过配置传输链路与通道信息即可实现跨网通信。

公开(公告)号：CN118332038A

公开(公告)日：2024-07-12

申请号：CN202410352341.9

申请日：2024-03-26

Applicant: 南威软件股份有限公司

Inventor： 徐春梅 ,  林琼英 ,  颜伟进 ,  程炎

IPC: G06F16/25 ,  G06F16/21 ,  G06F16/23 ,  G06F16/18 ,  G06F16/22 ,  G06F16/215 ,  G06F16/28

Abstract: 本发明属于数据事务处理技术领域，公开了一种基于HDFS的ETL增量数据事务处理方法及系统，提供一种异步增量的HDFS文件数据合并服务，从而实现HDFS系统的文件数据增量过滤的能力，在保证原服务不中断的前提下达到重复数据的增量合并。提案中提出的内存增量化合并模型需要在尽压缩硬件资源耗费的前提下同时达到更高效的数据合并处理能力。本发明设定了更优的内存数据索引目录与血缘信息记录，使之在保证高效的前提下同时提供了跟踪工具，同时在增量化的数据回存原HDFS分区时提供了事务化保证了数据的安全性。

公开(公告)号：CN117891818A

公开(公告)日：2024-04-16

申请号：CN202410107017.0

申请日：2024-01-25

Applicant: 南威软件股份有限公司

Inventor： 徐春梅 ,  黄文峰 ,  林琼英 ,  林巧明 ,  程炎

IPC: G06F16/22 ,  G06F16/25

Abstract: 本发明属于数据处理技术领域，公开了一种基于数据对比的多数据源对账方法、系统及计算机设备，通过生成hashCode对原始数据进行拆分成为带编号的小数据块，实现对账双方的原始数据化整为零；通过对比编号相同的小数据块中的hashCode，完成原始数据的对账工作。通用的数据差异化对比方案，将对比的两者数据中每条记录生成hashCode，通过对比hashCode来完成两者数据的差异对比。本发明生成对账数据的hashCode和数据分块，从而通过对比相同编号的小数据块来完成整体数据的对账工作，提高对账效率。本发明使用的是对数据生成hashCode并对数据进行拆分，通过对比拆分数据来进一步完成数据对账的。

公开(公告)号：CN117332013A

公开(公告)日：2024-01-02

申请号：CN202311437252.6

申请日：2023-11-01

Applicant: 南威软件股份有限公司

Inventor： 吴志雄 ,  林巧明 ,  吴发贵 ,  林琼英 ,  黄嘉豪 ,  程炎

IPC: G06F16/27 ,  G06F16/22

Abstract: 本发明涉及一种基于Debezium的组件化增量数据同步方法，其包括Debezium的Oracle连接器捕获并记录发生在Oracle服务器上的数据库中的行级更改。本申请提案增量方法中通过数据库CDC方案解决组件化增量同步服务。本申请提案采用Debezium技术分析底层日志即可得到真实数据进行入库，不能识别的数据库字段采用读取SQL语句得到数据再进行入库操作。本方案同时支持两种入库操作，无需过多的存储技术。