首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种适应flink作业规则的快速编排系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:武汉思普崚技术有限公司

摘要:本发明涉及一种适应flink作业规则的快速编排系统,包括:日志过滤组件,用于获取日志数据,过滤日志数据并生成过滤日志;日志关联组件,用于对过滤日志进行条件聚合,生成汇聚数据流;日志分析组件,用于分析汇聚数据流中的数据特征;规则响应组件,用于根据生成的规则模板,对数据特征进行匹配,并输出事件信息。本发明简单灵活的配置各种类型的关联分析规则场景,以适应实际网络环境中产生的各类安全威胁事件,只需要简单的通过拖拽基础组件配置参数即可定制任何检测规则场景,利用flink框架特征,能精准高效的分析安全威胁场景,对于快速变化的安全威胁特征,可以立即调整规则分析模型和修改规则参数并发布,及时适配最新安全威胁特征。

主权项:1.一种适应flink作业规则的快速编排系统,其特征在于,包括日志过滤组件、日志关联组件、日志分析组件、规则响应组件,其中:所述日志过滤组件,用于获取日志数据,过滤所述日志数据并生成过滤日志;所述日志关联组件,用于对所述过滤日志进行条件聚合,生成汇聚数据流;所述日志分析组件,用于分析所述汇聚数据流中的数据特征;所述日志分析组件包括日志统计组件、阈值比较组件和序列分析组件;所述日志统计组件,用于在设定的时间段内,选择多个不同的维度进行统计,计算所述过滤日志的数值的统计特征,其中,所述统计特征包括总数、求和、平均值、最大值和最小值的至少一种;时间范围支持flink时间窗口和水位线特性;所述阈值比较组件,用于对所述统计特征进行比较,生成比较结果;所述序列分析组件,用于在设定的时间段内,判断攻击顺序和攻击次数是否满足攻击分析条件;所述序列分析组件包括排序组件和攻击事件分析组件;所述排序组件,用于根据flink时间窗口的事件时间和处理时间进行相应的数据排序;还用于根据flink水位线配置进行延长等待时间;所述攻击事件分析组件,用于根据flink时间窗口和flink水位线配置,确定不同攻击事件的先后顺序和攻击次数;所述规则响应组件,用于根据生成的规则模板,对所述数据特征进行匹配,并输出事件信息;所述规则响应组件包括规则选择模块、规则生成模块和规则报警组件;所述规则选择模块,用于根据用户自定义的业务模板,配置规则对应作业在flink集群运行时所需的资源参数,构建相应的规则结构;且根据选择的模板进入规则建模页面,在预设的规则结构上进行规则参数设置,也可以重构规则结构;所述规则生成模块,用于根据编排的规则结构生成具体的xml格式的规则语句,每一个组件对应规则语句中的一个节点,每个节点有一个对应的子节点,以此来指向数据流后续的流向,其中,序列分析组件的时间范围是一个单独的节点;所述规则报警组件,用于对所述规则语句命中的过滤日志进行告警输出。

全文数据:

权利要求:

百度查询: 武汉思普崚技术有限公司 一种适应flink作业规则的快速编排系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。