一种基于cassandra数据库的文件合并的方法和装置

    公开(公告)号:CN111881092B

    公开(公告)日:2024-07-09

    申请号:CN202010576064.1

    申请日:2020-06-22

    Abstract: 本发明涉及数据库领域,特别是涉及一种基于cassandra数据库的文件合并的方法和装置。主要包括:接受数据库生成的数据文件,生成各磁盘的合并文件列表;各磁盘的合并进程获取相应磁盘的合并文件列表,获取各磁盘的合并文件列表中需合并的数据文件大小;启动;数据库的并行合并进程,计算各磁盘的合并进程获取到数据文件大小的总和数据文件大小的总和达到合并文件阈值时,并行合并进程一次性合并所有磁盘中需合并的数据文件。本发明可以在使用较少合并层次和临时文件的情况下及时对小文件进行合并,减少合并次数、减少磁盘中文件占用空间、减少磁盘IO次数和磁盘IO争抢,提高了文件合并的性能,提高了数据库的读写稳定性。

    通过负载均衡设备确定当前会话的后端设备的方法与设备

    公开(公告)号:CN112311876B

    公开(公告)日:2022-08-16

    申请号:CN202011187354.3

    申请日:2020-10-30

    Abstract: 本申请提供一种通过负载均衡设备确定当前会话的后端设备的方法与设备,包括:根据当前会话对应的会话字段及对应哈希表确定所述当前会话的哈希值,其中,所述哈希表的长度大于或等于预定倍数的多个后端设备的设备数量,所述多个后端设备与所述负载均衡设备相对应;根据所述当前会话的哈希值从所述多个后端设备匹配中确定目标后端设备,并将所述当前会话分发至所述目标后端设备。本申请大大降低哈希值取模后的冲突,在保证同源同宿的同时,能够保证不同后端设备的流量分配均匀,降低服务器的负载压力,防止由于流量分配不均造成数据丢包,提升了数据分析处理的准确性和可靠性。

    一种基于DPI的NB-IoT终端故障定位方法和装置

    公开(公告)号:CN111030876B

    公开(公告)日:2022-05-06

    申请号:CN201911358386.2

    申请日:2019-12-25

    Abstract: 本发明涉及NB‑IOT终端故障定位技术领域,提供了一种基于DPI的NB‑IoT终端故障定位方法和装置。方法包括以Attach Request消息作为xDR生成的开始标志,以Attach Complete作为xDR生成的结束标志的主事务,将信令消息的数据关联在一起,输出第一条xDR数据记录;以Downlink data消息作为xDR生成的开始标志,以Service Accept作为xDR生成的结束标志的主事务,将用户面消息和信令面消息的数据关联在一起,输出第二条xDR数据记录,分析NB‑IoT终端的故障。本发明通过信令过程记录,提供了一套故障定位体系为用户线上问题识别及线下故障解决提供技术支撑。

    一种高铁移动终端用户小区切换方法和系统

    公开(公告)号:CN110505665B

    公开(公告)日:2021-12-14

    申请号:CN201910728749.0

    申请日:2019-08-08

    Abstract: 本发明涉及移动通信领域,具体涉及一种高铁移动终端用户小区切换方法和系统,步骤为:获得高铁购票系统中单条车次高铁列车的移动终端用户列表,获取该车次高铁列车应经过的高铁小区序列,根据高铁小区序列计算相邻小区间的切换点,根据该车次高铁列车当前位置及应经过的高铁小区序列获得本次列车当前所处的高铁小区和即将经过的高铁小区,该车次经过当前所处的高铁小区和即将经过的高铁小区间所述切换点时,切换该车次高铁列车的移动终端用户列表中的用户通信使用的高铁小区。本发明通过预先获取移动终端用户列表及应切换的高铁小区序列,减少了高铁小区切换时的通信负荷及计算负荷,提高了切换效率及信号稳定性,提升移动终端用户的通信体验。

    一种对原始网络数据包的有损压缩存储方法和装置

    公开(公告)号:CN111147483B

    公开(公告)日:2021-11-12

    申请号:CN201911358385.8

    申请日:2019-12-25

    Abstract: 本发明涉及网络数据处理技术领域,提供了一种对原始网络数据包的有损压缩存储方法和装置。方法包括对于每一个链路层数据包,确定链路层数据包类型字段的内容并非IPv4协议或者IPv6协议,则确定其后数据是隧道协议,直接丢弃相应的链路层数据包;则直接丢弃网络层中版本号字段、头长度字段、标识字段和总和校验字段,保留源IP地址字段、目的IP地址字段和下一层的协议字段;若无需保真还原传输层相关信息,丢弃选项字段、校验字段、窗口大小字段、序列号、确认序列号和紧急指针字段,保留源端口号和目的端口号中。本发明实施例提供的方法能很好的缓解有限存储空间内的存储需求。

    服务器资源分配方法以及边缘数据中心

    公开(公告)号:CN112286695A

    公开(公告)日:2021-01-29

    申请号:CN202011554376.9

    申请日:2020-12-24

    Inventor: 黄华桥 谭国权

    Abstract: 本申请公开了一种服务器资源分配方法以及边缘数据中心,服务器资源分配方法应用于边缘数据中心,边缘数据中心包括至少一个资源分配管理单元和多个网络功能单元,服务器资源分配方法包括:资源分配管理单元监控当前各网络功能单元的服务器资源使用情况;资源分配管理单元根据当前各网络功能单元的服务器资源使用情况,动态调整分配给各网络功能单元的服务器资源。通过在边缘数据中心中部署单独的资源分配管理单元,利用资源分配管理单元来监控各网络功能单元的服务器使用情况,根据各网络功能单元的服务器资源的实时使用情况,调整分配给各网络功能的服务器资源,使得服务器资源分配的更加合理,极大的提升了服务器资源的利用率。

    控制器分配方法、计算机设备、存储介质及网络业务系统

    公开(公告)号:CN112134964A

    公开(公告)日:2020-12-25

    申请号:CN202011173875.3

    申请日:2020-10-28

    Abstract: 本申请公开了一种控制器分配方法,包括:网络功能实体将来自终端设备的业务请求发送至路由中心;路由中心确定业务请求对应的业务类型信息,一种业务类型信息对应一种业务类型;路由中心根据业务类型信息,在至少一个控制器集群中确定与业务类型信息对应的目标控制器集群;路由中心将目标控制器集群分配给网络功能实体;网络功能实体对与业务请求同类业务类型的业务请求进行处理。该方法通过判断业务请求中的业务类型信息,将不同的业务类型信息进行划分,并将不同的业务类型信息与不同的控制器集群进行绑定,实现不同的控制器集群控制网络功能实体分别处理不同的业务类型。通过将控制器根据业务类型进行细分,可以有效提高数据业务的处理效率。

    一种个人信息泄露监测方法和装置

    公开(公告)号:CN111917718A

    公开(公告)日:2020-11-10

    申请号:CN202010589849.2

    申请日:2020-06-24

    Abstract: 本发明涉及信息安全技术领域,提供了一种个人信息泄露监测方法和装置。方法包括前端个人信息泄露监测设备的网卡接收IP数据流,所述IP数据流是全部信息的原始流量;根据个人信息监测规则逐流/逐包的检测所述IP数据流的内容,并将命中个人信息监测规则的IP数据流进行记录;将命中个人信息监测规则的IP数据流进行记录进行关联整合,生成归档数据。本发明对通过分析各ISP/ICP企业的通信数据,分析该应用流量收集的个人信息维度是否属于“违规、越权收集”,统计ISP/ICP企业收集了哪些用户的个人信息、收集了哪些维度的个人信息以及有哪些ISP/ICP企业在收集用户个人信息,并能对其行为进行取证。

    一种不良网站的识别方法和识别装置

    公开(公告)号:CN111884992A

    公开(公告)日:2020-11-03

    申请号:CN202010516443.1

    申请日:2020-06-09

    Abstract: 本发明公开了一种不良网站的识别方法和识别装置,该识别方法包括基于深度学习算法建立目标识别模型;获取来自于当前访问网站的网页信息;通过所述目标识别模型对所述网页信息进行识别,判断确定所述网页信息是否包含不良图片信息;若所述网页信息包含不良图片信息,则阻断本次访问。在本发明中,基于深度学习算法建立目标识别模型,根据目标识别模型对网页内容进行识别,从而确定当前访问网站是否为不良网站。采用本发明的方案,无需提取出词串,并转成特征向量,实现方式更简单;由于很多不良网站在URL名中没有明显的体现,基于URL识别的准确率较低,采用已经训练好的目标识别模型进行识别,准确率更高。

    一种基于DPI的NB-IoT终端故障定位方法和装置

    公开(公告)号:CN111030876A

    公开(公告)日:2020-04-17

    申请号:CN201911358386.2

    申请日:2019-12-25

    Abstract: 本发明涉及NB-IOT终端故障定位技术领域,提供了一种基于DPI的NB-IoT终端故障定位方法和装置。方法包括以Attach Request消息作为xDR生成的开始标志,以Attach Complete作为xDR生成的结束标志的主事务,将信令消息的数据关联在一起,输出第一条xDR数据记录;以Downlink data消息作为xDR生成的开始标志,以Service Accept作为xDR生成的结束标志的主事务,将用户面消息和信令面消息的数据关联在一起,输出第二条xDR数据记录,分析NB-IoT终端的故障。本发明通过信令过程记录,提供了一套故障定位体系为用户线上问题识别及线下故障解决提供技术支撑。

Patent Agency Ranking