无锡恒鼎超级计算中心有限公司薛巍获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉无锡恒鼎超级计算中心有限公司申请的专利大规模集群作业异常检测方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114116392B 。
龙图腾网通过国家知识产权局官网在2025-07-25发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202111410717.X,技术领域涉及:G06F11/30;该发明授权大规模集群作业异常检测方法是由薛巍;杨斌;邵明山;矫志宏设计研发完成,并于2021-11-25向国家知识产权局提交的专利申请。
本大规模集群作业异常检测方法在说明书摘要公布了:本发明提供的一种大规模集群的作业异常检测方法,涉及异常检测方法,包括从数据资料库中联合获取作业性能数据;对获取的作业性能数据进行筛选,获得作业IO的性能数据;对获得的作业IO的性能数据进行二次筛选,分成若干独立的IO阶段,获得IO阶段数据;获取IO阶段的总吞吐量、持续时间、带宽峰值、带宽众数作为该IO阶段的特征数据;将IO阶段的特征数据与历史IO阶段特征数据进行聚类,判断IO阶段的特征数据是否异常。本发明通过将将IO阶段的特征数据与历史IO阶段特征数据进行聚类,及时发现IO的性能异常,方便根据判断出的异常类型及时的进行处置解决,以实时对IO性能进行优化,提升系统资源利用率,提高IO性能。
本发明授权大规模集群作业异常检测方法在权利要求书中公布了:1.一种大规模集群的作业异常检测方法,其特征在于,包括 从数据资料库中联合获取作业性能数据; 对获取的作业性能数据进行筛选,获得作业IO的性能数据; 对获得的作业IO的性能数据进行二次筛选,分成若干独立的IO阶段,获得IO阶段数据; 获取IO阶段的总吞吐量、持续时间、带宽峰值、带宽众数作为该IO阶段的特征数据; 将IO阶段的特征数据与历史IO阶段特征数据进行聚类,判断IO阶段的特征数据是否异常; 其中,作业性能数据包括从作业数据库中获取的数据和从系统级数据中获取对应时间内计算节点的性能数据;作业数据库中获取的数据包括作业的起止时间和用到的计算节点;从系统级数据中获取对应时间内计算节点的性能数据包括读写带宽、读写IOPS、读写请求分布和访问文件;性能数据包括每秒的读写带宽大小、每秒的读写操作数、每秒读写的文件数、每秒进行IO的进程数、主要访问文件列表、读写请求大小分布、IO总时间、整体读写连续性; 所述“对获得的作业IO的性能数据进行二次筛选”包括:选择一个小波基函数,对作业IO的带宽波形信号进行等间隔抽样,得到信号对应的样点序列;基于样点序列进行N级离散小波变换,得到N级不同尺度的小波展开系数;对小波展开系数选择相应的阈值以及阈值规则进行阈值化处理,得到阈值处理后的各级小波展开系数;根据阈值处理后的小波展开系数以及未处理的小波展开系数进行N级重构,得到去噪信号;通过去噪信号,将不同的IO阶段分离。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人无锡恒鼎超级计算中心有限公司,其通讯地址为:214000 江苏省无锡市滨湖区吟白路1号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。