Document
拖动滑块完成拼图
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于大数据流处理框架的画布式日志分析方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:深信服科技股份有限公司

摘要:本申请公开了一种基于大数据流处理框架的画布式日志分析方法、系统及存储介质,所述基于大数据流处理框架的画布式日志分析方法包括:根据用户在画布上的拖拽操作获取画布工作区域的算子;根据所述算子形成日志分析的工作流;将所述工作流转换成对应的Json格式文件;将所述Json格式文件生成执行器上运行的分布式程序,以使执行器执行分布式程序对日志数据进行分析。解决了现有技术中使用大数据流处理框架的开源程序进行日志分析时存在操作复杂、可靠性及稳定性无法保障、维护困难的问题,达到了大数据流处理框架日志分析的操作简单且高效的效果。

主权项:1.一种基于大数据流处理框架的画布式日志分析方法,其特征在于,所述方法包括:根据用户在画布上的拖拽操作获取画布工作区域的算子;根据所述算子形成日志分析的工作流;将所述工作流转换成对应的Json格式文件;将所述Json格式文件转换成DSL描述文件;根据所述DSL描述文件生成相应的作业流图,所述作业流图是被大数据流处理框架的数据流引擎所识别的表述作业的数据结构;按照作业流图的类型构造执行环境,设置参数配置,包括:根据作业流图中所包含的源算子判断作业流图的类型,若所述作业流图的类型为批处理类型,则构建与批处理对应的执行环境,若所述作业流图的类型为流处理类型,则构建与流处理对应的执行环境;根据所述作业流图生成执行器运行的分布式程序,以使执行器执行分布式程序对日志数据进行分析。

全文数据:

权利要求:

百度查询: 深信服科技股份有限公司 基于大数据流处理框架的画布式日志分析方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。