Document
拖动滑块完成拼图
首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种基于数据虚拟化的应急数据标准化系统及方法 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:北京紫云智能科技有限公司

摘要:本发明提供了一种基于数据虚拟化的应急数据标准化系统及方法,包括:元数据抽取模块、异构数据融合模块、数据标准化模块、映射前置处理模块以及数据映射层模块,通过元数据抽取、数据融合、数据标准化、智能增量同步和一致性保证步骤,确保了数据的一致性、准确性和可用性。这些步骤不仅提高了数据处理的效率,还为上层应用提供了统一的数据视图,有助于决策支持和紧急情况下的快速响应。

主权项:1.一种基于数据虚拟化的应急数据标准化系统,其特征在于,包括:元数据抽取模块、异构数据融合模块、数据标准化模块、映射前置处理模块以及数据映射层模块,其中:所述元数据抽取模块通过多个不同数据源接口抽取元数据,并将元数据发送到虚拟化系统中,以作为数据视图和虚拟表格定义的基础,所述元数据中包含多类型异构应急数据;所述异构数据融合模块接收所述元数据抽取模块的元数据,通过数据虚拟化服务器执行数据融合,确定融合数据,以使上层应用访问多类型异构数据;所述数据标准化模块基于预设的应急数据标准将融合数据进行标准化处理,得到应急数据;所述映射前置处理模块基于元数据分析得到应急数据格式,再依据应急数据格式监测数据源,当监测到数据源的变更事件时,通过多维度增量同步算法确保虚拟化系统中的应急数据与数据源一致;当监测到多个数据源对相同数据进行修改时,通过一致性保证算法确保数据的一致性和准确性;所述数据映射层模块根据虚拟表格到数据源的映射,将标准化处理后得到的应急数据映射到原始数据源;其中,所述映射前置处理模块,包括:数据同步单元和冲突解决单元;数据同步单元在监测到数据源变更事件后,首先执行多维度增量同步算法,将变更数据同步到虚拟化系统中;在同步过程中,数据同步单元会记录每个数据项的版本号和时间戳作为同步信息,以备冲突解决单元使用;同步完成后,数据同步单元将同步信息传递给冲突解决单元;冲突解决单元接收到同步信息后,检查是否存在数据冲突;如果检测到数据冲突,冲突解决单元使用一致性保证算法来解决冲突;冲突解决单元将解决后的数据版本返回给数据同步单元,数据同步单元据此更新虚拟化系统中的数据;数据同步单元和冲突解决单元之间通过消息传递机制进行通信,以确保同步过程和冲突解决过程的协调一致;其中,所述多维度增量同步算法包括:给定数据项Di的历史变更记录Hi,数据源Sj的特性Cj,数据项的重要性Wi,数据源的质量分数Qj,以及数据源可信度Tj,预测数据项Di在下一时间段内发生变更的预测概率Pi为: ;其中,是sigmoid函数,用于将预测结果转换为概率值,表示通过时间序列模型提取历史记录Hi的特征向量,表示通过聚类分析得到的数据源特性Cj的特征向量,表示通过预测模型预测出的数据项的重要性Wi的特征向量,表示数据源的质量分数Qj的非线性权重函数,表示数据源可信度Tj的特征向量,,,,,是权重系数,用于调整各因素的影响程度;针对预测概率大于阈值的数据项,在预设时间节点的上一时间周期内进行数据同步,针对预测概率小于阈值的数据项,在预设时间节点的下一时间周期内进行数据同步,以减少数据冗余。

全文数据:

权利要求:

百度查询: 北京紫云智能科技有限公司 一种基于数据虚拟化的应急数据标准化系统及方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。