买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明提供了一种海量主数据融合方法及装置。该方法包括:通过设计主数据表的结构;为属性字段配置一个或多个来源表的取数字段,并设置来源表取数字段的置信度,以及来源表的数据内容更新时间字段;运行数据融合任务,从配置的来源表读取数据,包括主键字段和取数字段的内容,根据取数字段的置信度、数据内容更新时间、数据内容是否为空,综合计算后生成该字段内容的版本号,将主键、主数据字段名、字段内容、版本号一同写入HBase表。HBase根据新写入的版本号与该字段内容当前版本号,按数值大小做比较。完成主数据融合,查询主数据表,获取融合后的主数据。本发明在处理海量主数据融合方面提供了高效、可靠和经济的方法。
主权项:1.一种海量主数据融合方法,其特征在于,该方法包括以下步骤:1首先,通过设计主数据表的结构;2然后,为属性字段配置一个或多个来源表的取数字段,并设置来源表取数字段的置信度,以及来源表的数据内容更新时间字段;接着,运行数据融合任务,从配置的来源表读取数据,包括主键字段和取数字段的内容,根据取数字段的置信度、数据内容更新时间、数据内容是否为空,综合计算后生成该字段内容的版本号,然后将主键、主数据字段名、字段内容、版本号一同写入HBase表;HBase根据新写入的版本号与该字段内容当前版本号,按数值大小做比较;3最后,完成主数据融合,查询主数据表,获取融合后的主数据。
全文数据:
权利要求:
百度查询: 广州市品高软件股份有限公司 一种海量主数据融合方法及装置
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。