买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉中国移动通信有限公司研究院;中国移动通信集团有限公司申请的专利多轮对话的预训练方法、装置、设备及存储介质获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN116910191B 。

龙图腾网通过国家知识产权局官网在2026-03-27发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202310273772.1，技术领域涉及：G06N3/0895；该发明授权多轮对话的预训练方法、装置、设备及存储介质是由钞芳宁;孟繁宇;付姣姣;刘睿设计研发完成，并于2023-03-17向国家知识产权局提交的专利申请。

本多轮对话的预训练方法、装置、设备及存储介质在说明书摘要公布了：本申请公开了一种多轮对话的预训练方法、装置、设备及存储介质，涉及通信技术领域，以解决现有技术无法全面、准确地获取多轮对话中的特征信息的问题。轮对话的预训练方法，包括：对多轮对话文本进行基于对话语义的预训练，获取第一预训练结果；对所述多轮对话文本进行基于对话结构的预训练，获取第二预训练结果，所述第二预训练结果为图形结构。

本发明授权多轮对话的预训练方法、装置、设备及存储介质在权利要求书中公布了：1.一种多轮对话的预训练方法，其特征在于，包括： 对多轮对话文本进行基于对话语义的预训练，获取第一预训练结果； 对所述多轮对话文本进行基于对话结构的预训练，获取第二预训练结果，所述第二预训练结果为图形结构； 其中，所述图形结构由节点和边组成；所述节点包括：对话语义标识CLS节点、角色节点、知识节点和其他节点，所述角色节点包括用户输入USR节点和系统回复SYS节点，所述知识节点包括槽位Slot节点以及领域相关的关键词Keyword节点； 其中，所述边的连接方式包括： 所述对话语义标识CLS节点与每个所述节点连接； 所述用户输入USR节点和所述系统回复SYS节点按照对话发生顺序有向连接； 同一个意图下的所述关键词Keyword节点和所述槽位Slot节点全连接，不同意图间的所述节点连接，如果不同的所述槽位Slot节点对应的槽值有重复，不同的所述槽位Slot节点相连； 其中，所述方法还包括： 通过以下公式，根据所述第一预训练结果和所述第二预训练结果，获取所述多轮对话文本的对话语义向量： ，为所述对话语义向量，为权重值，为第一预训练结果；为第二预训练结果； 其中，所述对所述多轮对话文本进行基于对话结构的预训练，获取第二预训练结果包括： 采用Bert模型对所述多轮对话文本进行初始化编码，获取所述多轮对话文本中各个节点的编码结果； 根据所述多轮对话文本中各个节点的编码结果，采用GAT模型进行预训练，获取第二预训练结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人中国移动通信有限公司研究院;中国移动通信集团有限公司，其通讯地址为：100053 北京市西城区宣武门西大街32号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。