首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于趋势点识别和Flink流式处理的增量数据价值增密方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:西南交通大学

摘要:本发明公开了一种基于趋势点识别和Flink流式处理的增量数据价值增密方法,具体为:基于存量数据的数据特征识别分类:基于趋势点识别方法,识别存量数据集中每个数据点不同点特征,对每个数据点进行分类;对存量数据集中数据项进行识别与分类;基于Kafka‑Flink的增量数据实时处理:读取每条数据的分类标签,根据分类结果匹配预处理策略,并基于Flink‑Kafka调用和执行预处理策略,对生产增量式数据进行实时预处理,实现价值增密。本发明可以实现增量数据的价值增密,可以精准识别数据特征将其归类,并对增量数据进行高效准确的实时处理。

主权项:1.一种基于趋势点识别和Flink流式处理的增量数据价值增密方法,其特征在于,具体为:步骤1:基于存量数据的数据特征识别分类;1基于趋势点识别方法,识别存量数据集中每个数据点不同点特征,对每个数据点进行分类;2对存量数据集中数据项进行识别与分类;3针对于离散制造车间原始数据特征,采用应用于阶跃数据特征的数据去重策略与应用于波动数据特征的去重-插补策略两种方法进行数据预处理;步骤2:基于Kafka-Flink的增量数据实时处理;读取每条数据的分类标签,根据分类结果匹配预处理策略,并基于Flink-Kafka调用和执行预处理策略,对生产增量式数据进行实时预处理,实现价值增密。

全文数据:

权利要求:

百度查询: 西南交通大学 基于趋势点识别和Flink流式处理的增量数据价值增密方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。