买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:大连理工大学
摘要:本发明提供一种网络安全事件实时分析系统及其工作方法,包括:WEB模块,设置事件关键词,并发送到任务调度模块;任务调度模块,用于根据WEB模块设置的事件关键词,构建特定的URL,并负责调度爬虫模块;爬虫模块,用于利用爬虫架构爬取关键词的相关话题,将爬取到的数据发送到数据缓存模块;数据缓存模块,用于将原始数据进行去重、去噪和格式转换操作,并将处理后的数据写入kafka数据库中;实时计算模块,用于获取kafka数据库中的数据,通过分布式计算方式,计算不同维度的指标;分词统计模块,用于将高指标数据所对应的评论、新闻和话题,用分词器进行分词,将出现次数较多的词作为关键字;可视化模块,用于将数据和关键字,生成可视化图表和词云图。
主权项:1.一种网络安全事件实时分析系统,其特征在于,包括:WEB模块、任务调度模块、爬虫模块、数据缓存模块、实时计算模块、分词统计模块和可视化模块,其中:所述WEB模块,设置事件关键词,确定初始时爬取的数据方向,并发送到任务调度模块;所述任务调度模块,用于根据WEB模块设置的事件关键词,构建URL,并负责调度爬虫模块;所述爬虫模块,用于利用爬虫架构爬取关键词的相关话题,将爬取到的数据发送到数据缓存模块;所述数据缓存模块,用于对爬虫模块爬取到的原始数据进行去重、去噪和格式转换操作,并将处理后的数据写入kafka数据库中;所述实时计算模块,用于获取kafka数据库中的数据,通过分布式计算方式,计算不同维度的指标;所述分词统计模块,用于将实时计算模块计算出的高指标数据所对应的评论、新闻和话题,用分词器进行分词,将出现次数最多的词作为关键字;所述可视化模块,用于将实时计算模块的数据和分词统计模块的关键字,生成可视化图表和词云图。
全文数据:
权利要求:
百度查询: 大连理工大学 一种网络安全事件实时分析系统及其工作方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。