首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种数据查询方法、设备及介质 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:天元大数据信用管理有限公司

摘要:本申请公开了一种数据查询方法、设备及介质,方法包括:获取用户的数据查询请求;根据所述数据查询请求中的若干查询条件,通过具有查询功能的Impala在预先构建的分区数据表中进行查询,得到查询结果;判断查询结果是否为有效查询;若否,则根据所述查询结果对所述分区数据表进行更新。本申请实施例通过数据处理工具Impala能够提高数据查询的速度,并基于Impala的基础上,通过构建分区数据表,能够提供合理的分区,能够充分发挥impala的性能,并通过判断查询结果是否为有效查询,能够不断地对分区数据表进行优化,进一步提高Impala的查询效率,从而能够为用户提高数据查询的速度,提高查询效率。

主权项:1.一种数据查询方法,其特征在于,所述方法包括:获取用户的数据查询请求;根据所述数据查询请求中的若干查询条件,通过具有查询功能的Impala在预先构建的分区数据表中进行查询,得到查询结果;判断所述查询结果是否为有效查询;若否,则根据所述查询结果对所述分区数据表进行更新;确定所述分区数据表,具体包括:获取设定的若干样本查询条件;通过所述Impala生成各样本查询条件的下分别对应的数据集;根据所述数据集,生成一张统计数据表;基于所述统计数据表,对所述各样本查询条件进行组合,确定样本查询条件组合;所述样本查询条件组合中的样本查询条件之间的数据集的数据量差值不大于预设阈值;根据所述样本查询条件组合,对所述统计数据表进行分区,以构建分区数据表;所述基于所述统计数据表,对所述各样本查询条件进行组合,确定样本查询条件组合,具体包括:将所述各样本查询条件以及所述各样本查询条件的下分别对应的数据集的数据量进行编码,确定所述各样本查询条件分别对应的标签;根据所述各样本查询条件分别对应的标签,对所述各样本查询条件进行组合,确定若干样本查询条件组合;所述根据所述各样本查询条件分别对应的标签,对所述各样本查询条件进行组合,确定若干样本查询条件组合,具体包括:获取所述各样本查询条件分别对应的查询概率;按照所述查询概率由高到低的顺序,将所述各样本查询条件分别对应的标签进行排序,确定标签序列;在所述标签序列中,按照排序顺序,依次将所述标签进行组合,确定多个标签组合;基于所述多个标签组合,确定若干样本查询条件组合;所述在所述标签序列中,按照排序顺序,依次将所述标签进行组合,确定多个标签组合,具体包括:在所述标签序列中,通过将第一标签依次与其他标签进行组合,确定与第一样本查询条件的数据集的数据量之间差值最小的第二样本查询条件所对应的第二标签;将所述第一标签与所述第二标签进行组合,确定标签组合,并将所述标签组合输入标签组合序列,并在所述标签序列中,删除所述第一标签与所述第二标签;直至所述标签序列中不包括所述标签,以在所述标签组合序列中,确定多个标签组合。

全文数据:

权利要求:

百度查询: 天元大数据信用管理有限公司 一种数据查询方法、设备及介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。