首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于Flink与任务调度优化的滑坡灾害多源监测数据集成方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:郑州大学

摘要:本发明属于防灾减灾技术领域,公开了基于Flink与任务调度优化的滑坡灾害多源监测数据集成方法,包括:从监测区域获取原始监测数据并进行预处理,获取监测数据,将不同数据库不同数据结构的监测数据转换为预设格式的目标数据,搭建Flink集群以流计算的形式将目标数据从各个数据库集成至目标数据库,基于改进PSO的任务调度优化算法收集系统信息,统计Flink集群每个节点的资源性能数据,获取每个节点的负载数据,构建LSTM模型,对Flink集群的负载情况进行预测分析,根据负载分析的结果,使用粒子群优化算法对Flink集群进行任务调度优化,并进行优化前后对比分析。本发明实现对灾害多源异构监测数据实时集成。

主权项:1.基于Flink与任务调度优化的滑坡灾害多源监测数据集成方法,其特征在于,包括如下步骤:步骤1、分别从监测区域监测点处的各个监测设备获取原始监测数据,并存储至相应的数据库;步骤2、对每种原始监测数据进行第一预处理,获取监测数据;步骤3、将不同数据库中不同数据结构的所述监测数据转换为预设格式的目标数据;步骤4、搭建Flink集群,以流计算的形式将所有目标数据从各个数据库集成至目标数据库中;步骤5、基于改进PSO的任务调度优化算法收集所述Flink集群中每个节点的系统信息,统计每个所述节点的资源性能数据,获取每个所述节点的负载数据和所述Flink集群的平均负载;步骤6、构建LSTM模型,对所述Flink集群的负载情况进行预测分析;步骤7、根据负载分析的结果,使用粒子群优化算法对所述Flink集群进行任务调度优化,并进行优化前后对比分析。

全文数据:

权利要求:

百度查询: 郑州大学 基于Flink与任务调度优化的滑坡灾害多源监测数据集成方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。