-
公开(公告)号:CN117336382A
公开(公告)日:2024-01-02
申请号:CN202311432974.2
申请日:2023-10-31
Applicant: 南威软件股份有限公司
IPC: H04L69/14 , H04L69/18 , H04L67/145
Abstract: 本发明涉及一种基于RMI的跨网多协议链式传输方法,其特征在于:客户端注册通道,并提前配置的链路与通道信息,服务端间的请求将按照预定的链路信息并通过注册的通道进行传输;在通讯传输中,客户端根据配置的链路信息将请求转发至对应服务端,服务端将根据链路信息判断通道链路是否结束,若没有结束则继续向下一级服务端转发请求,否则将执行本地请求并回传结果。本发明将服务通讯过程链式化,将通讯过程抽离业务,无需关心具体实现原理,通过配置传输链路与通道信息即可实现跨网通信。
-
公开(公告)号:CN117221099A
公开(公告)日:2023-12-12
申请号:CN202311261911.5
申请日:2023-09-27
Applicant: 南威软件股份有限公司
IPC: H04L41/069 , H04L43/04
Abstract: 本发明涉及数据分析领域,尤其是一种基于NIfi血缘的日志分析方法、系统及存储介质。基于Nifi血缘的日志分析方法包括:通过Nifi Reporting Task发送血缘日志到kafka,消费所述kafka中的所述血缘日志进行分析,将流式的所述血缘日志转化成批式的运行实例,并在所述运行实例中计算输入输出量。基于NIfi血缘的日志分析系统,包括Nifi Reporting Task模块、Kafka模块和分析模块。存储介质存有计算机程序,所述计算机程序用于使计算机执行上述基于Nifi血缘的日志分析方法。本发明通过将流式的血缘日志转化成批式的运行实例,在日志量较大时,可以有效的降低日志的占用空间,且分析时长相对较短。
-
公开(公告)号:CN117632147A
公开(公告)日:2024-03-01
申请号:CN202311597319.2
申请日:2023-11-24
Applicant: 南威软件股份有限公司
IPC: G06F8/60 , H04L67/00 , G06F3/0484 , G06F3/0481 , G06F8/41
Abstract: 本发明公开了基于Shell脚本的系统集成交互式部署方法,包括如下步骤:S1:将压缩的部署包上传至服务器并对所述部署包进行解压;S2:使用系统命令source加载并执行步骤S1解压后目录下的脚本文件init.sh;S3:执行所述脚本文件时,产生一个命令窗口用于展示操作项,可根据部署需求,输入对应的编号、IP地址或部署的端口;S4:程序解析并验证步骤S3输入的内容,如果输入的内容有效则执行相应的Shell脚本进行部署,否则返回步骤S3或结束部署;S5:步骤S4完成部署之后,Shell脚本会对部署结果进行自检,并将自检结果反馈到命令窗口。该部署方法提供了人机交互部署,使得安装部署过程变得简单易懂,降低了对操作人员的操作水平的要求。
-
公开(公告)号:CN118332038A
公开(公告)日:2024-07-12
申请号:CN202410352341.9
申请日:2024-03-26
Applicant: 南威软件股份有限公司
Abstract: 本发明属于数据事务处理技术领域,公开了一种基于HDFS的ETL增量数据事务处理方法及系统,提供一种异步增量的HDFS文件数据合并服务,从而实现HDFS系统的文件数据增量过滤的能力,在保证原服务不中断的前提下达到重复数据的增量合并。提案中提出的内存增量化合并模型需要在尽压缩硬件资源耗费的前提下同时达到更高效的数据合并处理能力。本发明设定了更优的内存数据索引目录与血缘信息记录,使之在保证高效的前提下同时提供了跟踪工具,同时在增量化的数据回存原HDFS分区时提供了事务化保证了数据的安全性。
-
公开(公告)号:CN117891818A
公开(公告)日:2024-04-16
申请号:CN202410107017.0
申请日:2024-01-25
Applicant: 南威软件股份有限公司
Abstract: 本发明属于数据处理技术领域,公开了一种基于数据对比的多数据源对账方法、系统及计算机设备,通过生成hashCode对原始数据进行拆分成为带编号的小数据块,实现对账双方的原始数据化整为零;通过对比编号相同的小数据块中的hashCode,完成原始数据的对账工作。通用的数据差异化对比方案,将对比的两者数据中每条记录生成hashCode,通过对比hashCode来完成两者数据的差异对比。本发明生成对账数据的hashCode和数据分块,从而通过对比相同编号的小数据块来完成整体数据的对账工作,提高对账效率。本发明使用的是对数据生成hashCode并对数据进行拆分,通过对比拆分数据来进一步完成数据对账的。
-
公开(公告)号:CN117332013A
公开(公告)日:2024-01-02
申请号:CN202311437252.6
申请日:2023-11-01
Applicant: 南威软件股份有限公司
Abstract: 本发明涉及一种基于Debezium的组件化增量数据同步方法,其包括Debezium的Oracle连接器捕获并记录发生在Oracle服务器上的数据库中的行级更改。本申请提案增量方法中通过数据库CDC方案解决组件化增量同步服务。本申请提案采用Debezium技术分析底层日志即可得到真实数据进行入库,不能识别的数据库字段采用读取SQL语句得到数据再进行入库操作。本方案同时支持两种入库操作,无需过多的存储技术。
-
-
-
-
-