恭喜深圳市腾讯信息技术有限公司智绪浩获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜深圳市腾讯信息技术有限公司申请的专利一种文本去重的方法、装置及设备获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN110162630B 。
龙图腾网通过国家知识产权局官网在2025-06-27发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:201910384114.3,技术领域涉及:G06F16/35;该发明授权一种文本去重的方法、装置及设备是由智绪浩;庄超;毕研涛;魏学峰设计研发完成,并于2019-05-09向国家知识产权局提交的专利申请。
本一种文本去重的方法、装置及设备在说明书摘要公布了:本申请公开了一种文本去重的方法、装置及设备,所述方法包括:基于目标对象反馈的第一反馈文本,确定所述第一反馈文本中的实体关键词和描述关键词;基于文本分类模型,确定所述实体关键词的第一词向量以及所述描述关键词的第二词向量;基于所述第一词向量与所述第二词向量,确定所述第一反馈文本的句向量;计算所述第一反馈文本的句向量与预设文本向量库中第二反馈文本的句向量之间的相似度;基于所述相似度,对所述第一反馈文本进行去重处理。采用本申请提供的技术方案,可以准确计算出目标对象反馈的第一反馈文本与预设文本向量库中第二反馈文本之间的相似度,从而提高文本去重的准确率。
本发明授权一种文本去重的方法、装置及设备在权利要求书中公布了:1.一种文本去重的方法,其特征在于,所述方法包括: 通过预设的关键词库,获取目标对象反馈的第一反馈文本中的原始实体关键词和原始描述关键词,所述关键词库包括实体关键词库和描述关键词库; 基于预设同义词库,对所述原始实体关键词和所述原始描述关键词进行同义词替换处理,得到所述原始实体关键词对应的标准实体关键词和所述原始描述关键词对应的标准描述关键词; 将所述标准实体关键词作为实体关键词,将所述标准描述关键词作为描述关键词;所述描述关键词用于描述所述实体关键词; 基于文本分类模型,确定所述实体关键词的第一词向量以及所述描述关键词的第二词向量; 通过以下公式确定所述实体关键词的第一概率权重以及所述描述关键词的第二概率权重: 式中,a表示常数,Pw表示所述实体关键词或者所述描述关键词在预设文本向量库中出现的概率,不随所述第一反馈文本而变化; 确定所述实体关键词的第一类型权重;所述第一类型权重用于表征所述实体关键词的重要程度; 确定所述描述关键词的第二类型权重;所述第二类型权重用于表征所述描述关键词的重要程度; 基于所述第一概率权重、所述第一类型权重与所述第一词向量,确定所述实体关键词的权重词向量; 基于所述第二概率权重、所述第二类型权重与所述第二词向量,确定所述描述关键词的权重词向量; 计算所述实体关键词和所述描述关键词的权重词向量的平均值,得到权重词向量平均值; 将所述权重词向量平均值作为所述第一词向量与所述第二词向量的加权平均值;并将所述加权平均值确定为所述第一反馈文本的句向量; 计算所述第一反馈文本的句向量与预设文本向量库中第二反馈文本的句向量之间的相似度,所述预设文本向量库包括预设的第二反馈文本与句向量的映射关系; 基于所述相似度,对所述第一反馈文本进行去重处理。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人深圳市腾讯信息技术有限公司,其通讯地址为:518000 广东省深圳市前海深港合作区前湾一路1号A栋201室;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。