一种基于cassandra数据库的文件合并的方法和装置

    公开(公告)号:CN111881092B

    公开(公告)日:2024-07-09

    申请号:CN202010576064.1

    申请日:2020-06-22

    Abstract: 本发明涉及数据库领域,特别是涉及一种基于cassandra数据库的文件合并的方法和装置。主要包括:接受数据库生成的数据文件,生成各磁盘的合并文件列表;各磁盘的合并进程获取相应磁盘的合并文件列表,获取各磁盘的合并文件列表中需合并的数据文件大小;启动;数据库的并行合并进程,计算各磁盘的合并进程获取到数据文件大小的总和数据文件大小的总和达到合并文件阈值时,并行合并进程一次性合并所有磁盘中需合并的数据文件。本发明可以在使用较少合并层次和临时文件的情况下及时对小文件进行合并,减少合并次数、减少磁盘中文件占用空间、减少磁盘IO次数和磁盘IO争抢,提高了文件合并的性能,提高了数据库的读写稳定性。

    一种基于Hadoop分布式文件系统的数据分发方法和装置

    公开(公告)号:CN117807131A

    公开(公告)日:2024-04-02

    申请号:CN202311844714.6

    申请日:2023-12-29

    Abstract: 本发明涉及数据处理技术领域,提供了一种基于Hadoop分布式文件系统的数据分发方法和装置。方法包括:在每个周期开始时,计算已写入到服务器中的数据的大小,根据已写入到服务器中的数据的大小,计算服务器的空间占用率,根据各服务器之间的空间占用率的关系,确定该周期的分发策略;在相应周期内,使用该周期的分发策略将待写数据分发到一个或多个服务器中;其中,所述分发策略用于指定各类型的待写数据所需写入的服务器。本发明使每个周期对应一种分发策略,则用于写入相应类型的待写数据的DataNode节点仅需与分发策略所确定下来的服务器进行通信,而无需与分发策略以外的服务器进行通信,从而减少网络资源的占用,提高数据分发的速度,减少卡顿。

    一种5G NSA网络下锚点站质量评估的方法和装置

    公开(公告)号:CN111970719B

    公开(公告)日:2024-01-30

    申请号:CN202010766295.9

    申请日:2020-08-03

    Abstract: 本发明涉及通信领域,特别是涉及一种5G NSA网络下锚点站质量评估的方法和装置。主要包括:获取锚点站质量指标数据;根据评估维度,由质量指标数据中选取需要进行评估的评估因子;根据评估业务需求,为各评估因子配置不同的权重;根据评估因子的值和权重,计算预设评估区域的各评估因子的加权总分,作为该预设评估区域的质量得分。本发明可以便捷准确的获取各锚点站的质量状况,为5G NSA网络优化提供支撑,提高5G业务用户的用户感知。

    目标数据备份和恢复的方法、装置、设备及存储介质

    公开(公告)号:CN112328435B

    公开(公告)日:2023-09-12

    申请号:CN202011418479.2

    申请日:2020-12-07

    Abstract: 本申请提供一种目标数据的备份和恢复的方法、装置、设备及存储介质,包括:创建索引Hash表,为所述索引Hash表分配共享内存空间,将所述索引HASH表映射到所述共享内存空间;获取所述目标数据,确定所述目标数据在所述索引Hash表中的索引标识,将所述目标数据存储在服务器内存文件系统中所述索引标识对应的备份位置;当转发程序出现故障重启后,创建用于存储所述目标数据的存储Hash表,根据所述key值查找所述存储Hash表,判断是否能够查找得到所述目标数据;若否,则根据所述key值将所述目标数据内容插入到所述存储Hash表中。本申请降低了成本,降低转发程序异常重启对业务的影响,提升数据恢复的效率。

    网络安全检测方法、装置、电子设备及存储介质

    公开(公告)号:CN116436705B

    公开(公告)日:2023-08-11

    申请号:CN202310695670.9

    申请日:2023-06-13

    Inventor: 侯贺明

    Abstract: 本发明公开了一种网络安全检测方法、装置、电子设备及存储介质。网络安全检测方法包括:获取网络资源地址参数,并判断网络资源地址参数是否包含于缓存键;若是,则发送正常网络请求信息至缓存服务器,并接收缓存服务器返回的正常网络响应信息;然后获取测试网络资源地址参数,并根据测试网络资源地址参数和目标网络资源地址得到第一测试网络请求信息;再发送第一测试网络请求信息至缓存服务器,并接收缓存服务器返回的第一测试网络响应信息;根据正常网络响应信息和第一测试网络响应信息,判断是否存在网络安全缺陷。本发明可以有效的检测出网络安全缺陷,以让技术人员可以及时消除安全缺陷,防止安全缺陷被非法利用,造成网络安全问题。

    报文流量管理方法、业务云网关及计算机可读存储介质

    公开(公告)号:CN116112455A

    公开(公告)日:2023-05-12

    申请号:CN202211714775.6

    申请日:2022-12-29

    Inventor: 陈真

    Abstract: 本申请提供一种报文流量管理方法、业务云网关及计算机可读存储介质。该方法应用于业务云网关,在接收到来自用户终端的初始报文流量后,根据外部流量分析设备与该业务云网关的对接模式对该初始报文流量进行处理,得到处理后的报文流量,然后将处理后的报文流量引入外部流量分析设备,以使得该外部流量分析设备对处理后的报文流量进行安全分析处理,接收外部流量分析设备发送的安全报文流量并对该安全报文流量进行转换还原处理,最后将还原后的安全报文流量转发至互联网。该方法在网关层面实现安全流量穿透,在不影响原有业务正常进行的前提下,缓解了中间转发设备的安全业务处理压力,提高了流量转发的准确性和速度。

    ip地址资源管理方法、云网关、电子设备及存储介质

    公开(公告)号:CN116016442A

    公开(公告)日:2023-04-25

    申请号:CN202211714808.7

    申请日:2022-12-29

    Inventor: 陈真

    Abstract: 本申请提供一种ip地址资源管理方法、云网关、电子设备及存储介质,该方法应用于云网关,通过对目标终端的实时流量数据进行分析,计算出目标终端访问网络的最新时间与当前时间的时间差,如果时间差大于预设差值,则表示在较长时间内目标终端未访问网络,可能处于下线状态,然后再向目标终端发送可达性探测报文,如果目标终端没有返回响应报文,则可以判定其已经下线,此时将目标终端的ip地址资源回收,回收时机较为准确,因此既不会影响目标终端的正常使用,又节省了网络资源,最大程度地提高了网络资源的使用率,减少了资源不足、资源浪费的情况。

    提供自动端口映射服务的方法、装置、云网关设备及介质

    公开(公告)号:CN115987937A

    公开(公告)日:2023-04-18

    申请号:CN202211719911.0

    申请日:2022-12-30

    Inventor: 赵坤

    Abstract: 本申请实施例提供一种提供自动端口映射服务的方法、装置、云网关设备及介质,云网关设备中包括虚拟网口设备,当云网关设备接收到来自于局域网内终端的请求自动端口映射服务的HTTP请求报文时,通过UPnP模块将HTTP请求报文写入至虚拟网口设备,利用虚拟网口设备的协议栈来解析HTTP请求报文得到请求信息,通过UPnP模块从虚拟网口设备中读取请求信息并对请求信息进行响应,以确定自动端口映射服务的服务端口号,利用虚拟网口设备的协议栈封装服务端口号以生成响应HTTP请求报文的网络层响应报文并发送至终端,本申请实施例实现在利用透传方式传递报文的云网关设备上提供UPnP模块的自动端口映射服务。

    控制器分配方法、网络业务系统

    公开(公告)号:CN112350952B

    公开(公告)日:2023-04-07

    申请号:CN202011173964.8

    申请日:2020-10-28

    Abstract: 本申请公开了一种控制器分配方法、网络业务系统,控制器分配方法包括:目标网络功能实体接收终端设备发送的业务请求;监视器监听终端设备发送的业务请求,将业务请求上报至路由中心;路由中心根据预设业务优先级评估策略对业务请求进行评估得到业务优先级,并根据业务优先级在多个控制器中为业务请求分配目标控制器;通过按照业务优先级的高低先后进行处理,保证优先级高的业务请求优先分配控制器,有利于实现各个控制器的负载均衡,避免控制器因处理工作量超出负荷而发生故障。

    一种基于流特征识别HTTPS加密视频流的方法和装置

    公开(公告)号:CN114513685B

    公开(公告)日:2022-10-11

    申请号:CN202210108305.9

    申请日:2022-01-28

    Inventor: 杨琨

    Abstract: 本发明涉及HTTPS加密数据包检测技术领域,本发明提供了一种基于流特征识别HTTPS加密视频流的方法和装置,其中,方法包括:获取批量的HTTPS加密数据包;统计对应各自同一服务主题下的HTTPS加密数据包的流特征项,得到各自对应流特征项下一组参数值;将对应每一服务主题下的所述参数值,与样本模型进行匹配,确认相应服务主题是视频业务或者非视频业务。本发明通过研究分析不同流媒体对象视频业务和非视频业务流特征项的差异得到可量化的参数值,实现在无需解密HTTPS加密数据包的情况下,能够准确有效的识别当前服务主题下的业务是视频业务还是非视频业务。

Patent Agency Ranking