买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉上海销氪信息科技有限公司申请的专利一种数据查重的方法、装置及介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN114722041B 。

龙图腾网通过国家知识产权局官网在2025-11-28发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202210326767.8，技术领域涉及：G06F16/22；该发明授权一种数据查重的方法、装置及介质是由汪金洋设计研发完成，并于2022-03-30向国家知识产权局提交的专利申请。

本一种数据查重的方法、装置及介质在说明书摘要公布了：本发明公开了一种数据查重的方法、装置及介质，适用于计算机技术领域。通过待查重数据生成目标对键数据，进而与redis列表的位图数据进行比对，若不存在，则确定redis列表中无重复数据以节约大量的数据逐一比对时间，若存在，则进一步确定是否是redis列表中出现的误判问题，进而比对数据库中的存储数据的二次校验，当数据库中存在重复数据时，则说明redis列表中存在重复数据，若数据库中不存在重复数据，则确定无重复数据。通过二次校验在数据库中比对，节约了多数据源同时比对的时间，以此减少数据比对查重的操作时间，提高用户的体验效果。

本发明授权一种数据查重的方法、装置及介质在权利要求书中公布了：1.一种数据查重的方法，其特征在于，包括： 获取待查重数据，并根据所述待查重数据对应的请求参数确定数据类型；其中，在SaaS场景中，根据待查重数据在SaaS数据查重模块中确定数据类型；待查重数据为多数据源多维度的多个数据同时进行比对查询； 根据所述数据类型和所述请求参数在位图规则中找到所述待查重数据对应的目标对键数据；所述位图规则定义数据类型和redis中位图的对键的映射规则和位图的实际数据存储的数据库的关系； 判断在redis列表是否查询到所述目标对键数据对应的目标位图数据； 若否，则确定所述redis列表中不存在与所述待查重数据对应的重复数据； 若是，则路由至所述目标位图数据对应的数据库，并判断所述数据库是否存在与所述待查重数据对应的重复数据；其中，通过哈希表方式的路由表进行数据结构查询； 若存在，则确定所述redis列表中存在所述重复数据； 若不存在，则确定所述redis列表中不存在所述重复数据； 其中，所述redis列表的位图数据的确定通过以下方式得到： 根据所述位图规则内的对键数据生成对应的位图数据并保存至所述redis列表中； 或者，根据所述数据库内的待写入数据生成对应的订阅数据并确定所述订阅数据对应的订阅数据类型； 根据所述订阅数据类型在位图规则中确定对应的所述对键数据； 根据所述对键数据生成对应的所述位图数据并保存至所述redis列表中； 对应地，所述位图规则中的对键数据的确定通过以下方式得到： 获取所述待写入数据并确定所述待写入数据对应的数据类型； 根据所述数据类型确定所述位图规则内对应的映射规则，其中所述映射规则为所述数据类型以及对键数据和所述对键数据存储的数据库的规则； 根据所述数据类型与所述映射规则的关系确定所述待写入数据对应的对键数据； 对应地，在确定所述redis列表的位图数据之后，还包括： 将所述待写入数据保存至所述对键数据对应的所述数据库中； 对应地，还包括： 当确定所述redis列表中的查询结果时，则输出提示信息。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人上海销氪信息科技有限公司，其通讯地址为：200441 上海市宝山区逸仙路2816号1幢9层；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。