买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:中国建设银行股份有限公司;建信金融科技有限责任公司
摘要:本申请提供一种基于文档图像的问答方法、装置、设备、存储介质及程序产品。涉及人工智能领域。该方法包括:获取目标文档图像及对应的问题相关信息,并将目标文档图像输入至预设版面分析模型中;采用预设版面分析模型确定目标文档图像中的至少一个目标版面类型标识及目标版面类型标识在目标文档图像中的区域信息;对问题相关信息、至少一个目标版面类型标识及目标版面类型标识在目标文档图像中的区域信息依次进行拼接及编码得到文本特征信息;获取图像特征信息,并采用预设对齐策略对图像特征信息以及文本特征信息进行对齐得到图文对齐信息;基于图文特征信息及预设问答模型确定目标文档图像对应的问题答复信息。提高文档图像问答的准确性。
主权项:1.一种基于文档图像的问答方法,其特征在于,包括:获取目标文档图像及对应的问题相关信息,并将所述目标文档图像输入至预设版面分析模型中;所述预设版面分析模型是采用标注预设信息的预设文档图像训练至收敛得到的;所述预设信息为:预设文档图像中的至少一个预设版面类型标识及各所述预设版面类型标识在所述预设文档图像中的区域信息;所述预设版面类型标识包括以下的任意一项:总标题标识、页眉标识、页脚标识、文本标识、段落标识、图片标题标识、图片标识、表格标题标识、表格标识、公式标识、参考文献标识;采用所述预设版面分析模型确定所述目标文档图像中的至少一个目标版面类型标识及所述目标版面类型标识在目标文档图像中的区域信息;对所述问题相关信息、至少一个目标版面类型标识及所述目标版面类型标识在目标文档图像中的区域信息依次进行拼接处理及编码处理,以获得所述目标文档图像对应的文本特征信息;所述拼接处理是基于预设统一格式进行的;获取图像特征信息,并采用预设对齐策略对所述图像特征信息以及所述文本特征信息进行对齐处理,以获得所述目标文档图像对应的图文对齐信息;基于所述图文特征信息及预设问答模型确定所述目标文档图像对应的问题答复信息。
全文数据:
权利要求:
百度查询: 中国建设银行股份有限公司 建信金融科技有限责任公司 基于文档图像的问答方法、装置、设备、存储介质及程序产品
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。