首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

一种用于数据质检的规则筛选方法、装置、介质及设备 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:中国人民公安大学;深圳高新兴神盾信息技术有限公司

摘要:本发明涉及数据处理领域,尤其涉及一种用于数据质检的规则筛选方法、装置、介质及设备,包括:根据候选质检规则对验证数据表中的验证数据进行质检,获取到验证数据表中的验证数据相对于候选质检规则的目标质检结果和目标质检标签,进而获取到验证数据表相对于候选质检规则的验证数据质量评分,根据验证数据质量评分与质量评分范围的比较,判断候选质检规则针对各个目标数据源对应的数据的质检有效性,并获取到目标质检模型用于待质检数据表的质检,通过对应的目标质检模型对各个待质检数据表进行质检,获取到各个质检数据对应的数据质量等级,提高了目标质检模型的质检规则的丰富性和质检结果的准确性。

主权项:1.一种用于数据质检的规则筛选方法,其特征在于,所述用于数据质检的规则筛选方法包括如下步骤:S100,获取到N个目标数据源对应的N个待质检数据表、N个验证数据表、预设的质量评分范围、预设的数据质检平台和所述数据质检平台中待筛选的Q个候选质检规则,其中,所述数据质检平台中包括N个预设质检模型,第i个预设质检模型用于对第i个目标数据源对应的数据进行质检,i=1,2……,N,N是指待质检数据表的总数量;S200,根据第q个候选质检规则对第i个验证数据表中的第v个验证数据进行质检,获取到所述第i个验证数据表中的第v个验证数据相对于所述第q个候选质检规则的目标质检结果Wivq,其中,v=1,2……,Vi,Vi是指所述第i个验证数据表中的总数据量,q=1,2……,Q,Q是指预设质检规则的总数量;S300,根据目标质检结果Wivq,获取到所述第i个验证数据表中的第v个验证数据相对于所述第q个候选质检规则的目标质检标签Rivq;S400,遍历v=1,2……,Vi,获取到所述第i个验证数据表相对于所述第q个候选质检规则的Vi个目标质检标签;S500,根据所述Vi个目标质检标签,获取到所述第i个验证数据表相对于所述第q个候选质检规则的验证数据质量评分Hiq;S600,若Hiq在所述质量评分范围内,则将所述第q个候选质检规则添加至所述第i个预设质检模型中,并通过遍历q=1,2……,Q,获取到第i个目标质检模型;S700,通过所述第i个目标质检模型对第i个待质检数据表进行质检,获取到所述第i个待质检数据表对应的数据质量等级。

全文数据:

权利要求:

百度查询: 中国人民公安大学 深圳高新兴神盾信息技术有限公司 一种用于数据质检的规则筛选方法、装置、介质及设备

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。