首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

基于嵌入向量的RAG生成质量评估方法和系统 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:浙江君同智能科技有限责任公司

摘要:本发明公开了一种基于嵌入向量的RAG生成质量评估方法和系统,属于自然语言处理技术领域,包括:将用户提供的文本数据和问题输入基于RAG的大语言模型,得到子文本集合、子文本嵌入向量、问题嵌入向量以及回答;利用子文本嵌入向量和问题嵌入向量之间的距离表征子文本和问题的相似程度,通过子文本和问题之间的相似情况、最相似情况和最不相似情况,综合判断文本‑问题的相关度评分;找到与子回答嵌入向量距离小于预设值的子文本嵌入向量作为第二相似向量,计算第二相似向量在子文本集合中的第二数量占比,得到RAG生成质量评分。本发明利用文本、问题和回答的嵌入向量之间的相似程度和最相似程度,评估相关性,准确度高,鲁棒性好。

主权项:1.一种基于嵌入向量的RAG生成质量评估方法,其特征在于,包括以下步骤:步骤1:将用户提供的文本数据和问题输入基于RAG的大语言模型中,将文本数据经过分割后的子文本存入子文本集合,将子文本和问题分别转换为子文本嵌入向量和问题嵌入向量,将问题嵌入向量和与其距离小于第一预设阈值的子文本嵌入向量分别对应的问题和子文本写入模板,大语言模型根据所述模板,结合问题对应的子文本做出回答;步骤2:找出所有与问题嵌入向量距离小于第二预设阈值的子文本嵌入向量,作为第一相似向量,计算第一相似向量在子文本集合中的第一数量占比,同时计算该问题嵌入向量与子文本嵌入向量的最小距离和最大距离,由最小距离和最大距离构建协调因子,以协调因子修正第一数量占比,修正结果为文本-问题的相关度评分;步骤3:将回答进行分割得到子回答并存入子回答集合,将子回答转换为子回答嵌入向量,针对每个子回答嵌入向量,找到与其距离小于第三预设阈值的子文本嵌入向量,作为第二相似向量,计算第二相似向量在子文本集合中的第二数量占比,以子回答集合中元素个数的倒数作为权重对第二数量占比加权,得到RAG生成质量评分。

全文数据:

权利要求:

百度查询: 浙江君同智能科技有限责任公司 基于嵌入向量的RAG生成质量评估方法和系统

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。