买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：杭州玳数科技有限公司

摘要：本发明公开了一种Flink状态信息的可视化方法及系统，属于数据处理技术领域，包括以下步骤：获取检查点文件，并对检查点文件进行解析得到状态句柄；根据状态句柄确定其对应的状态类型；根据状态类型选择与其相匹配的状态元数据获取方法，并基于元数据获取方法从状态句柄中提取出状态的元数据信息；根据状态类型对应的数据读取方法和元数据信息从检查点文件中获取状态数据，并对状态数据进行可视化展示。本发明可以直接通过checkpoint文件获取OperatorState和KeyedState的元数据解析，不需要用户知道有哪些state信息，降低了使用门槛，同时，信息可视化之后，还可帮助数仓以及开发人员快速直观地了解Flink任务的状态信息。

主权项：1.一种Flink状态信息的可视化方法，其特征在于，包括以下步骤：获取检查点文件，并对所述检查点文件进行解析得到状态句柄；根据所述状态句柄确定其对应的状态类型，所述状态类型包括第一状态类型和第二状态类型，所述第一状态类型为算子状态，所述第二状态类型为键控状态；根据所述状态类型选择与其相匹配的状态元数据获取方法，并基于所述元数据获取方法从所述状态句柄中提取出所述状态的元数据信息，包括：于所述状态类型为算子状态时，通过BackendRestorerProcedure对所述算子状态句柄进行恢复并构建算子状态后端类，所述算子状态后端类中设置有用于存储算子状态元数据信息的registeredOperatorStates字段；利用所述registeredOperatorStates字段获取所述算子状态的元数据信息；根据所述状态类型对应的数据读取方法和所述元数据信息从所述检查点文件中获取状态数据，并对所述状态数据进行可视化展示；其中，所述根据所述状态类型对应的数据读取方法和所述元数据信息从所述检查点文件中获取状态数据，包括：遍历所述算子状态的元数据信息，所述元数据信息包括状态值类型，所述状态值类型包括算子列表状态、联合列表状态和广播状态；将所述元数据信息转换为状态描述符，并根据所述状态值类型决定调用的所述算子状态后端类中的接口；将所述状态描述符传入所述接口中得到所述状态值类型数据对应的迭代器，并根据所述迭代器迭代获取所述检查点文件中算子状态的状态数据。

全文数据：

权利要求：

百度查询： 杭州玳数科技有限公司 一种Flink状态信息的可视化方法及系统