首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于动态规则降低告警噪音的数据处理方法及系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:北京网藤科技有限公司

摘要:本发明涉及数据处理技术领域,尤其涉及一种基于动态规则降低告警噪音的数据处理方法及系统,该方法包括:获取原始日志数据;提取出日志内容关键信息;基于预定义的初步过滤规则,对日志内容关键信息进行初步过滤处理,得到有效日志内容关键信息;构造包含风险等级信息的事件明细数据;构造结构化事件数据;将结构化事件数据输出至消息队列相应的目标主题下;基于web页面配置运维关注的动态规则,得到降噪后的告警数据。本发明能够针对不同运维关注需求灵活配置不同的动态规则,还能够有效提取出运维关注需求的告警数据,并且有效减少告警数据展示的数量,使其从繁杂的告警数据中解放出来,从而提升用户的工作效率。

主权项:1.一种基于动态规则降低告警噪音的数据处理方法,其特征在于,包括:获取多种日志格式类型的原始日志数据;基于原始日志数据的日志格式类型,配置对应的日志解析规则,基于配置的日志解析规则,对相应日志格式类型的原始日志数据进行标准化处理,提取出日志内容关键信息;基于预定义的初步过滤规则,对日志内容关键信息进行初步过滤处理,得到有效日志内容关键信息;构建事件风险等级维度表,将事件风险等级维度表和有效日志内容关键信息进行关联,并构造包含风险等级信息的事件明细数据;对事件明细数据进行归一化处理,构造结构化事件数据;将所有归一化处理后的结构化事件数据输出至消息队列相应的目标主题下;基于web页面配置运维关注的动态规则,并在动态规则配置完成后,生成对应的FlinkSQL计算任务,根据FlinkSQL计算任务消费消息队列中目标主题下的结构化事件数据,得到降噪后的告警数据。

全文数据:

权利要求:

百度查询: 北京网藤科技有限公司 一种基于动态规则降低告警噪音的数据处理方法及系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。