公开(公告)号：CN107222472A

公开(公告)日：2017-09-29

申请号：CN201710384599.7

申请日：2017-05-26

Applicant: 电子科技大学

Inventor： 郝玉洁 ,  钟德建 ,  王芷若 ,  崔建鹏 ,  陆文斌

IPC: H04L29/06 ,  G06F17/30

CPC classification number: H04L63/1425 ,  G06F17/30194

Abstract: 本发明公开了一种Hadoop集群下的用户行为异常检测方法，该方法通过采集和分析用户行为数据，以日志形式记录下来，根据用户的行为特征形成特征向量，利用并行主成分分析算法处理特征向量集，高效的获得用户的行为模式，通过与历史模式对比发现用户在访问HDFS时产生的异常行为问题，同时发现Hadoop集群下隐藏的安全威胁，达到保障HDFS安全的效果。本发明不仅对用户的数据访问行为建立有效的监控，及时的发现异常行为，保障Hadoop集群的数据安全，还通过并行化主成分分析算法提高模型训练效率，解决传统模型训练效率低的问题。

公开(公告)号：CN106055676B

公开(公告)日：2019-04-02

申请号：CN201610395246.2

申请日：2016-06-03

Applicant: 电子科技大学

Inventor： 林劼 ,  郝鹏飞 ,  彭世锦 ,  李年华 ,  陆文斌 ,  王晓明

IPC: G06F16/182 ,  G06F16/13 ,  G06F16/2458

Abstract: 本发明公开了一种基于大数据模型分析平台的数据溯源方法及系统，其方法包括以下步骤：S1.模型工作流分析：分析Hadoop平台上的模型构成的模型工作流的输入节点、输出节点和动作节点，并获取各节点的唯一标识；S2.设计溯源信息元数据模型：根据每个模型工作流对应描述一个溯源文件；S3.溯源信息存储：对所述溯源文件构建索引，将索引信息存放在缓存数据库，索引文件存放在HDFS上；S4.数据溯源追踪：判断是否追踪数据产生过程，若不追踪数据产生过程，则通过查询所述索引信息获取所述溯源文件的地址。本发明克服了传统数据溯源方法在大数据平台下不适用的问题，并为溯源文件建立索引，减少了输入/输出操作，提高了查询速度。

公开(公告)号：CN106055676A

公开(公告)日：2016-10-26

申请号：CN201610395246.2

申请日：2016-06-03

Applicant: 电子科技大学

Inventor： 林劼 ,  郝鹏飞 ,  彭世锦 ,  李年华 ,  陆文斌 ,  王晓明

IPC: G06F17/30

CPC classification number: G06F17/30194 ,  G06F17/30094 ,  G06F17/30545

Abstract: 本发明公开了一种基于大数据模型分析平台的数据溯源方法及系统，其方法包括以下步骤：S1.模型工作流分析：分析Hadoop平台上的模型构成的模型工作流的输入节点、输出节点和动作节点，并获取各节点的唯一标识；S2.设计溯源信息元数据模型：根据每个模型工作流对应描述一个溯源文件；S3.溯源信息存储：对所述溯源文件构建索引，将索引信息存放在缓存数据库，索引文件存放在HDFS上；S4.数据溯源追踪：判断是否追踪数据产生过程，若不追踪数据产生过程，则通过查询所述索引信息获取所述溯源文件的地址。本发明克服了传统数据溯源方法在大数据平台下不适用的问题，并为溯源文件建立索引，减少了输入/输出操作，提高了查询速度。