-
公开(公告)号:CN117041019A
公开(公告)日:2023-11-10
申请号:CN202311303626.5
申请日:2023-10-10
Applicant: 中国移动紫金(江苏)创新研究院有限公司 , 中国移动通信集团江苏有限公司
IPC: H04L41/0631 , H04L41/069 , H04L41/0677 , H04L41/16 , G06N3/045 , G06N3/09
Abstract: 本发明提供了一种内容分发网络CDN的日志分析方法、装置及存储介质,属于网络通信技术领域。日志分析方法包括如下步骤:采集待分析的节点的日志;对采集得到的日志进行预处理操作,筛选得到第一日志数据;为第一日志数据中的每个字段分配基础权重;基于所述基础权重,生成日志规则并根据后续字段出现频率和变化速度实时调整当前权重;对第一日志数据执行标准化数据编码操作,得到第二日志数据;构建日志异常检测模型,利用第二日志数据训练所述日志异常检测模型;利用日志异常检测模型实时监测当前节点的日志。本申请通过使用词嵌入模型,可以捕捉日志数据中的深层次关联性,并且可以处理各种复杂的、非线性的关系。
-
公开(公告)号:CN118041763B
公开(公告)日:2024-08-09
申请号:CN202410440976.4
申请日:2024-04-12
Applicant: 中国移动紫金(江苏)创新研究院有限公司 , 中国移动通信集团江苏有限公司 , 中国移动通信集团有限公司
IPC: H04L41/069 , H04L41/16 , G06F18/23213 , G06F18/2433 , G06F18/27 , G06F40/30 , G06N3/0442 , G06N3/0455 , G06N3/084
Abstract: 本申请公开了一种CDN日志数据处理方法、装置、设备、介质及程序产品,本申请涉及大数据技术领域,其中,CDN日志数据处理方法包括:从CDN节点实时获取第一多模态日志数据,将所述第一多模态日志数据转换成对应的特征向量,其中,所述第一多模态日志数据至少包括实时多模态日志数据和历史多模态日志数据;将所述历史多模态日志数据对应的特征向量输入预设的日志预测模型,获得预测日志数据;基于所述预测日志数据与所述实时多模态日志数据的特征向量,确定日志差异度;若所述日志差异度大于预设的异常检测阈值,则标记所述实时多模态日志数据为异常数据。本申请解决了传统CDN日志数据的异常检测方案的准确度和灵敏度较差的技术问题。
-
公开(公告)号:CN117041019B
公开(公告)日:2024-01-02
申请号:CN202311303626.5
申请日:2023-10-10
Applicant: 中国移动紫金(江苏)创新研究院有限公司 , 中国移动通信集团江苏有限公司
IPC: H04L41/0631 , H04L41/069 , H04L41/0677 , H04L41/16 , G06N3/045 , G06N3/09
Abstract: 本发明提供了一种内容分发网络CDN的日志分析方法、装置及存储介质,属于网络通信技术领域。日志分析方法包括如下步骤:采集待分析的节点的日志;对采集得到的日志进行预处理操作,筛选得到第一日志数据;为第一日志数据中的每个字段分配基础权重;基于所述基础权重,生成日志规则并根据后续字段出现频率和变化速度实时调整当前权重;对第一日志数据执行标准化数据编码操作,得到第二日志数据;构建日志异常检测模型,利用第二日志数据训练所述日志异常检测模型;利用日志异常检测模型实时监测当前节点的日志。本申请通过使用词嵌入模型,可以捕捉日志数据中的深层次关联性,并且(56)对比文件夏彬 等.基于生成对抗网络的系统日志级异常检测算法.计算机应用.2020,(第10期),全文.He Mingshu 等.Web log classificationframework with data augmentation based onGANs.The Journal of China Universities ofPosts and Telecommunications.2020,(05),全文.
-
公开(公告)号:CN118041763A
公开(公告)日:2024-05-14
申请号:CN202410440976.4
申请日:2024-04-12
Applicant: 中国移动紫金(江苏)创新研究院有限公司 , 中国移动通信集团江苏有限公司 , 中国移动通信集团有限公司
IPC: H04L41/069 , H04L41/16 , G06F18/23213 , G06F18/2433 , G06F18/27 , G06F40/30 , G06N3/0442 , G06N3/0455 , G06N3/084
Abstract: 本申请公开了一种CDN日志数据处理方法、装置、设备、介质及程序产品,本申请涉及大数据技术领域,其中,CDN日志数据处理方法包括:从CDN节点实时获取第一多模态日志数据,将所述第一多模态日志数据转换成对应的特征向量,其中,所述第一多模态日志数据至少包括实时多模态日志数据和历史多模态日志数据;将所述历史多模态日志数据对应的特征向量输入预设的日志预测模型,获得预测日志数据;基于所述预测日志数据与所述实时多模态日志数据的特征向量,确定日志差异度;若所述日志差异度大于预设的异常检测阈值,则标记所述实时多模态日志数据为异常数据。本申请解决了传统CDN日志数据的异常检测方案的准确度和灵敏度较差的技术问题。
-
公开(公告)号:CN119006029A
公开(公告)日:2024-11-22
申请号:CN202411170267.5
申请日:2024-08-23
Applicant: 中国移动紫金(江苏)创新研究院有限公司 , 中国移动通信集团江苏有限公司 , 中国移动通信集团有限公司
IPC: G06Q30/0201 , G06F18/213 , G06F18/26 , G06F18/10 , G06F18/22 , G06Q30/0202
Abstract: 本申请公开了一种基于多源数据的用户画像构建方法、设备、介质及产品,涉及大数据技术领域,基于多源数据的用户画像构建方法包括:采集目标群体的流量数据、通话数据、短信数据、位置数据以及终端设备数据;根据流量数据、通话数据、短信数据、位置数据以及终端设备数据,构建分别对应的多个特征向量,其中,特征向量至少包括流量信息、活跃信息、偏好信息、消费信息、位置信息以及时段信息中的一种;将目标群体中目标用户对应的各特征向量输入预设的用户画像模型,通过用户画像模型构建得到目标用户的用户画像。本申请的技术方案充分整合和挖掘了来自不同源头的数据进行构建用户画像,提高了用户画像的精准度和深度。
-
公开(公告)号:CN118585261A
公开(公告)日:2024-09-03
申请号:CN202410158511.X
申请日:2024-02-02
Applicant: 中国移动紫金(江苏)创新研究院有限公司 , 中国移动通信集团江苏有限公司 , 中国移动通信集团有限公司
IPC: G06F9/445 , G06F9/451 , G06N20/00 , G06F18/214 , G06F18/241
Abstract: 本申请公开了一种数据可视化平台参数配置方法、装置、设备、介质及产品,属于数据可视化的技术领域。在本申请中,将采集并预处理数据可视化平台的平台属性数据所得到的输入数据,输入至用于预测数据可视化平台的配置参数的机器学习模型中,通过该机器学习模型预测得到数据可视化平台的配置参数,再根据该配置参数对数据可视化平台进行参数更新,从而根据更新后的参数生成数据可视化平台的可视化界面。以此,灵活配置数据可视化平台的参数,提高对数据可视化平台进行参数配置的适应性。
-
公开(公告)号:CN118488477B
公开(公告)日:2024-10-11
申请号:CN202410943492.1
申请日:2024-07-15
Applicant: 中国移动紫金(江苏)创新研究院有限公司
IPC: H04W24/04 , H04W24/08 , H04W12/0471 , H04W76/27 , H04L9/06 , H04L9/40 , G06F18/2411
Abstract: 本发明涉及一种基于libpcap的5G网络XDR多维数据采集与治理方法,针对现有技术在处理5G网络数据采集和分析时的缺陷进行了优化和改进,利用libpcap进行数据采集,通过优化采集算法和增强处理能力,避免数据采集工具在捕获和分析数据时容易出现延迟或丢包现象。整合多维数据采集功能,更全面地捕获和分析5G网络中的各种数据类型。同时引入先进的数据治理和安全控制机制,提升了数据的安全性和管理效率。
-
公开(公告)号:CN118488477A
公开(公告)日:2024-08-13
申请号:CN202410943492.1
申请日:2024-07-15
Applicant: 中国移动紫金(江苏)创新研究院有限公司
IPC: H04W24/04 , H04W24/08 , H04W12/0471 , H04W76/27 , H04L9/06 , H04L9/40 , G06F18/2411
Abstract: 本发明涉及一种基于libpcap的5G网络XDR多维数据采集与治理方法,针对现有技术在处理5G网络数据采集和分析时的缺陷进行了优化和改进,利用libpcap进行数据采集,通过优化采集算法和增强处理能力,避免数据采集工具在捕获和分析数据时容易出现延迟或丢包现象。整合多维数据采集功能,更全面地捕获和分析5G网络中的各种数据类型。同时引入先进的数据治理和安全控制机制,提升了数据的安全性和管理效率。
-
-
-
-
-
-
-