-
公开(公告)号:CN114116392A
公开(公告)日:2022-03-01
申请号:CN202111410717.X
申请日:2021-11-25
Applicant: 无锡恒鼎超级计算中心有限公司
Abstract: 本发明提供的一种大规模集群的作业异常检测方法,涉及异常检测方法,包括从数据资料库中联合获取作业性能数据;对获取的作业性能数据进行筛选,获得作业I/O的性能数据;对获得的作业I/O的性能数据进行二次筛选,分成若干独立的I/O阶段,获得I/O阶段数据;获取I/O阶段的总吞吐量、持续时间、带宽峰值、带宽众数作为该I/O阶段的特征数据;将I/O阶段的特征数据与历史I/O阶段特征数据进行聚类,判断I/O阶段的特征数据是否异常。本发明通过将将I/O阶段的特征数据与历史I/O阶段特征数据进行聚类,及时发现I/O的性能异常,方便根据判断出的异常类型及时的进行处置解决,以实时对I/O性能进行优化,提升系统资源利用率,提高I/O性能。