买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明公开一种NL2SQL系统能力提升方法、装置、设备和介质。该方法包括:从能力指标库中确定待提升NL2SQL系统在目标场景下所需的能力项;根据预设场景测试题库对各能力项进行能力等级评估确定能力等级明细;基于能力等级明细确定能力项对应的能力提升模组矩阵;基于能力提升模组矩阵中各能力提升任务所属的任务提升类别选取最佳的目标能力提升任务进行集合分组,得到分组后的目标分组组合,并对目标分组组合进行调度,以对待提升NL2SQL系统进行能力感知提升。本发明实施例,通过上述技术方案,能够对NL2SQL系统进行全面细致的量化度量,且具有高效的组合调度方式,在提升复杂度低的情况下,实现NL2SQL系统能力感知高效率、精细化的提升。
主权项:1.一种NL2SQL系统能力提升方法,其特征在于,包括:从预先构建的能力指标库中确定待提升NL2SQL系统在目标场景下所需的能力项;根据预设场景测试题库对各所述能力项进行能力等级评估,以得到所述待提升NL2SQL系统的能力等级明细;基于所述能力等级明细确定所述能力项对应的能力提升模组矩阵;其中,所述能力提升模组矩阵中的每一个元素表示为对应能力项的能力提升任务;所述能力提升模组矩阵中的横坐标表示为所述待提升NL2SQL系统的能力项,纵坐标表示为所述待提升NL2SQL系统的任务提升类别;基于所述能力提升模组矩阵中各所述能力提升任务所属的任务提升类别选取最佳的目标能力提升任务进行集合分组,得到分组后的目标分组组合,并对所述目标分组组合进行调度,以对所述待提升NL2SQL系统进行能力感知提升;其中,所述基于所述能力等级明细确定所述能力项对应的能力提升模组矩阵,包括:从所述能力等级明细中选取出能力等级未达标的未达标能力项,以及能力等级达标的达标能力项;针对所述未达标能力项,在所述未达标能力项属于第一目标能力项的能力项的情况下,若所述能力等级明细为第一等级,则构建所述第一目标能力项对应的数据集,并采用预设掩码学习方法进行知识注入以构建能力提升模组矩阵;在所述未达标能力项属于第一目标能力项的能力项的情况下,若所述能力等级明细为第二等级,则采用有监督微调SFT方式进行概念对齐和外挂知识库中的任一一种方式构建能力提升模组矩阵;在所述未达标能力项属于第二目标能力项的能力项的情况下,若所述能力等级明细为第三等级,则通过指示学习的方式进行形式对齐的方式构建能力提升模组矩阵;在所述未达标能力项属于第二目标能力项的能力项的情况下,若所述能力等级明细为第四等级,则通过少样本学习方式、微调方式,或者通过外挂知识图谱中的其中任一一种方式构建能力提升模组矩阵;针对所述达标能力项,则无需生成能力提升模组矩阵,或者生成一个维持能力的能力提升模组矩阵;其中,所述基于所述能力提升模组矩阵中各所述能力提升任务所属的任务提升类别选取最佳的目标能力提升任务进行集合分组,得到分组后的目标分组组合,包括:判断各所述能力提升任务是否为同一类任务提升类别;若是,则将所述同一类任务提升类别的能力提升任务进行第一次合并得到第一合并结果,并在所述第一合并结果中依据预设需求选择最佳的能力提升任务进行第二次合并得到第二合并结果,并将所述第二合并结果最佳的目标能力提升任务进行集合分组,得到分组后的目标分组组合;其中,预设需求包括:训练语料相差最大的能力提升任务,或者训练语料最相似的能力提升任务;若否,则不进行合并。
全文数据:
权利要求:
百度查询: 星环信息科技(上海)股份有限公司 南京星环智能科技有限公司 一种NL2SQL系统能力提升方法、装置、设备和介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。