-
公开(公告)号:CN111541591B
公开(公告)日:2020-09-15
申请号:CN202010655264.6
申请日:2020-07-09
Applicant: 武汉绿色网络信息服务有限责任公司
Abstract: 本发明涉及服务器硬件检测技术领域,提供了一种基于SSH对服务器进行检测的方法和装置,方法包括:将各待检测服务器的主机名和IP地址保存到参数文件中;在利用SSH进行集群管理之前,逐行读取参数文件中的参数,并基于读取的IP地址对各待检测服务器执行SSH检测命令;实时监控每次SSH执行是否超时,如果超时则修改参数文件中对应的IP地址为不可达IP,并将对应的主机名和IP地址添加到故障机器列表中。本发明在不改变SSH的前提下,利用线程的异步原理与黑名单组合的方法来主动检测SSH卡死故障,可辅助管理节点在未知异常情况下正常管理失败节点,而不会出现SSH永久性卡死,增强了集群的健壮性,且维护成本低。
-
公开(公告)号:CN117785979A
公开(公告)日:2024-03-29
申请号:CN202311844716.5
申请日:2023-12-29
Applicant: 武汉绿色网络信息服务有限责任公司
IPC: G06F16/25 , G06F16/27 , G06F16/2458
Abstract: 本发明涉及数据处理技术领域,提供了一种基于ClickHouse的数据分发方法和装置。方法包括:关闭master节点的数据写入功能,并使各ETL与各数据库实例直接建立通信;ETL向各数据库实例写入测试数据,根据测试数据写入结果,判断数据库实例是否可用,若数据库实例可用,则ETL根据待写数据的大小,将待写数据直接分发到一个或多个数据库实例中。本发明通过关闭master节点的数据写入功能,并在各ETL与各数据库实例之间直接建立通信,从而无需使用master节点进行数据转发,而是直接通过ETL将数据写入到数据库实例中,能够打破master节点对于数据写入速度的限制,以满足大数据采集量和快速采集场景下的数据写入速率需求。
-
公开(公告)号:CN117807131A
公开(公告)日:2024-04-02
申请号:CN202311844714.6
申请日:2023-12-29
Applicant: 武汉绿色网络信息服务有限责任公司
IPC: G06F16/2458 , H04L67/1008 , H04L67/1097 , G06F16/27 , G06F16/22 , G06F16/182
Abstract: 本发明涉及数据处理技术领域,提供了一种基于Hadoop分布式文件系统的数据分发方法和装置。方法包括:在每个周期开始时,计算已写入到服务器中的数据的大小,根据已写入到服务器中的数据的大小,计算服务器的空间占用率,根据各服务器之间的空间占用率的关系,确定该周期的分发策略;在相应周期内,使用该周期的分发策略将待写数据分发到一个或多个服务器中;其中,所述分发策略用于指定各类型的待写数据所需写入的服务器。本发明使每个周期对应一种分发策略,则用于写入相应类型的待写数据的DataNode节点仅需与分发策略所确定下来的服务器进行通信,而无需与分发策略以外的服务器进行通信,从而减少网络资源的占用,提高数据分发的速度,减少卡顿。
-
公开(公告)号:CN111541591A
公开(公告)日:2020-08-14
申请号:CN202010655264.6
申请日:2020-07-09
Applicant: 武汉绿色网络信息服务有限责任公司
Abstract: 本发明涉及服务器硬件检测技术领域,提供了一种基于SSH对服务器进行检测的方法和装置,方法包括:将各待检测服务器的主机名和IP地址保存到参数文件中;在利用SSH进行集群管理之前,逐行读取参数文件中的参数,并基于读取的IP地址对各待检测服务器执行SSH检测命令;实时监控每次SSH执行是否超时,如果超时则修改参数文件中对应的IP地址为不可达IP,并将对应的主机名和IP地址添加到故障机器列表中。本发明在不改变SSH的前提下,利用线程的异步原理与黑名单组合的方法来主动检测SSH卡死故障,可辅助管理节点在未知异常情况下正常管理失败节点,而不会出现SSH永久性卡死,增强了集群的健壮性,且维护成本低。
-
公开(公告)号:CN117874079A
公开(公告)日:2024-04-12
申请号:CN202311844718.4
申请日:2023-12-29
Applicant: 武汉绿色网络信息服务有限责任公司
IPC: G06F16/2455 , G06F16/248 , G06F16/22
Abstract: 本发明涉及网络技术领域,提供了一种基于snmp4j的数据查询方法和装置。方法包括:当接收到相应查询指令时,则执行所述查询指令,得到查询数据;判断所述查询数据的数据长度是否为对应的固定数据长度,若所述查询数据的数据长度为对应的固定数据长度,则将所述查询数据返回给查询方,并将所述查询数据存储到缓存中;若所述查询数据的数据长度不是对应的固定数据长度,则从缓存中查找是否存在所述查询指令所对应的查询数据,若缓存中存在所述查询指令所对应的查询数据,则将缓存中的查询数据返回给查询方。本发明通过判断查询数据的完整性,当查询数据不完整时再返回缓存中的数据,以确保返回的查询数据完整。
-
公开(公告)号:CN117811804A
公开(公告)日:2024-04-02
申请号:CN202311846631.0
申请日:2023-12-29
Applicant: 武汉绿色网络信息服务有限责任公司
IPC: H04L9/40
Abstract: 本发明涉及数据访问领域,特别是涉及一种基于Nginx的企业级账号访问数据方法和系统。主要包括:代理服务器获取用户账号的访问权限、访问地址和访问请求;当用户账号的访问权限为只读权限时,代理服务器通过反向代理将访问请求定位至备用服务器中相应的访问地址,在访问地址中通过只读方式获取读数据请求中需要获取的数据;当用户账号的访问权限为读写权限时,代理服务器通过反向代理,将访问请求定位至主用服务器中相应的访问地址,在访问地址中获取读数据请求中需要读取的数据,和/或,将写数据请求中的相应数据写入主用服务器中的访问地址中。本发明可以减少备用服务器的资源闲置,并减轻主用服务器的处理负担。
-
-
-
-
-