-
公开(公告)号:CN109710231A
公开(公告)日:2019-05-03
申请号:CN201811570259.4
申请日:2018-12-21
Applicant: 成都四方伟业软件股份有限公司
IPC: G06F8/30
Abstract: 本发明提供了一种可视化脚本编辑方法与装置,涉及大数据分布式流式处理技术领域。通过接收一数据处理指令,再依据数据处理指令显示预存储的多个脚本语言与流引擎,然后依据一选择指令从多个脚本语言与流引擎选择目标脚本语言与目标流引擎,最后依据数据处理指令、目标脚本语言以及目标流引擎生成流计算脚本文件。本发明提供的可视化脚本编辑方法与装置具有方便技术人员操作,提高了流式处理开发效率的优点。
-
公开(公告)号:CN109656782A
公开(公告)日:2019-04-19
申请号:CN201811584022.1
申请日:2018-12-24
Applicant: 成都四方伟业软件股份有限公司
Abstract: 本申请实施例提供一种可视化调度监控方法、装置及服务器,提供一可视化界面,通过响应在管理服务器的可视化界面所选择的流式计算任务,并获取用于执行该流式计算任务的服务器集群信息。根据该流式计算任务配置所需的运行资源信息以及该流式计算任务对应的任务信息。根据用于执行该流式计算任务的服务器集群信息将携带运行资源信息和任务信息的流式计算任务发布至对应的服务器集群。并在接收到服务器集群反馈的发布成功信息后启动监控流程,以对流式计算任务的运行信息进行监控。本申请提供的可视化调度监控方案,利用管理服务器统一对多个服务器集群进行调度及监控,并通过可视化界面显示运行信息,实现了服务器集群之间的信息的统一管理。
-
公开(公告)号:CN109635022B
公开(公告)日:2021-04-13
申请号:CN201811290888.1
申请日:2018-10-31
Applicant: 成都四方伟业软件股份有限公司
IPC: G06F16/25 , G06F16/242 , G06F8/34
Abstract: 本发明公开了一种可视化的ElasticSearch数据采集方法及装置,包括:创建可视化组件,可视化组件包括输入插件、输出插件和调度插件;通过将输入插件、输出插件和调度插件关联,创建任务;分别对所述输入插件、输出插件和调度插件进行参数配置,得到输入插件配置文件、输出插件配置文件和调度插件配置文件;配置任务的运行节点和任务策略;加载任务策略,获取目标运行节点的节点信息;依据目标运行节点的节点信息将任务发送给目标运行节点以便目标运行节点获取并解析所述输入插件配置文件、输出插件配置文件和调度插件配置文件,执行数据采集;通过本发明简化了配置过程,可同时多任务多节点并发采集,有效提高了数据采集的效率,降低了使用成本。
-
公开(公告)号:CN109995878A
公开(公告)日:2019-07-09
申请号:CN201910294068.8
申请日:2019-04-12
Applicant: 成都四方伟业软件股份有限公司
IPC: H04L29/08
Abstract: 本发明提供了一种资源库共享方法及分布式集群系统,系统包括通信连接的部署终端、服务主机及多个节点主机,方法包括:部署终端响应用户的配置操作生成包括服务主机IP地址、各个节点主机IP地址及资源库路径的配置数据。部署终端将携带配置数据的配置请求发送给节点主机,以使节点主机根据配置请求进行资源库挂载操作,从而使各个节点主机能够访问存储在服务主机的资源库。部署终端为服务主机安装用于创建任务并将创建的该任务分发至节点主机的主服务,并为节点主机安装用于执行服务主机分发的任务的节点服务,以实现分布式集群系统的并发执行任务的能力。
-
公开(公告)号:CN109635022A
公开(公告)日:2019-04-16
申请号:CN201811290888.1
申请日:2018-10-31
Applicant: 成都四方伟业软件股份有限公司
IPC: G06F16/25 , G06F16/242 , G06F8/34
CPC classification number: G06F8/34
Abstract: 本发明公开了一种可视化的ElasticSearch数据采集方法及装置,包括:创建可视化组件,可视化组件包括输入插件、输出插件和调度插件;通过将输入插件、输出插件和调度插件关联,创建任务;分别对所述输入插件、输出插件和调度插件进行参数配置,得到输入插件配置文件、输出插件配置文件和调度插件配置文件;配置任务的运行节点和任务策略;加载任务策略,获取目标运行节点的节点信息;依据目标运行节点的节点信息将任务发送给目标运行节点以便目标运行节点获取并解析所述输入插件配置文件、输出插件配置文件和调度插件配置文件,执行数据采集;通过本发明简化了配置过程,可同时多任务多节点并发采集,有效提高了数据采集的效率,降低了使用成本。
-
公开(公告)号:CN109634937A
公开(公告)日:2019-04-16
申请号:CN201811561133.0
申请日:2018-12-20
Applicant: 成都四方伟业软件股份有限公司
IPC: G06F16/21 , G06F16/215 , G06F16/28
Abstract: 本申请提供的增量数据采集方法、装置及系统,通过提供一个可视化的配置界面。用户在所述配置界面输入需要监听的数据库,以及数据库中的表和字段。增量数据采集设备获取该配置请求,根据所述配置请求部署相应的增量监听环境,同时根据所述配置请求,配置相应的数据库,使得所述数据库在发生增量事件时,发送相应的增量数据。所述增量监听环境获取所述增量数据,并对所述增量数据做进一步的处理。本申请公开的技术方案使得用户只需要在配置界面进行简单的配置操作就可以对数据库的增量事件进行监听。降低了用户的使用门槛,提高了工作效率。
-
-
-
-
-