首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

文档图像的信息提取方法及装置、电子设备及存储介质 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:中国工商银行股份有限公司

摘要:本发明公开了一种文档图像的信息提取方法及装置、电子设备及存储介质,涉及人工智能领域、金融科技领域或其他相关领域,该方法包括:响应信息提取指令,采用各场景网络提取场景特征,将场景特征输入门控网络,进行加权处理,输出结果特征图,采用目标检测算法对结果特征图进行文本检测及识别,基于识别结果,连接结果特征图的跨模态特征与实体类型特征,由实体分类网络进行实体分类及文本范围定位,连接结果特征图的跨模态特征与实体关系特征,采用自注意力层捕获文本依赖关系,基于分类结果、文本范围及依赖关系,由实体链接网络获取文本信息内容。本发明解决了相关技术中由于文档图像存在异常,容易导致提取图像的信息出现失败的技术问题。

主权项:1.一种用于文档图像的信息提取方法,其特征在于,包括:响应图像信息提取指令,采用场景提取层中的各场景网络提取各文档图像中的场景特征,其中,所述场景提取层中的各场景网络包括:场景共享网络、指定场景网络以及场景感知注意力网络,所述场景共享网络用于提取出现重叠信息的N个场景的共享数据特征,所述指定场景网络用于提取所述文档图像中出现指定场景的场景特征,所述场景感知注意力网络用于提取有关联性场景的M个场景的相关性特征,其中,N和M为大于等于1的正整数;将提取得到的所有所述场景特征输入至门控网络中,由所述门控网络进行特征加权处理,输出结果特征图;采用目标检测算法对所述结果特征图进行文本检测以及文本识别;基于文本识别结果,连接所述结果特征图的跨模态特征与实体类型特征,采用T个自注意力层聚合所述结果特征图中关联实体的所有特征,得到聚合特征集合,并将所述聚合特征集合发送至实体分类网络,由所述实体分类网络进行实体分类以及文本范围定位,其中,T为大于1的正整数;连接所述结果特征图的跨模态特征与实体关系特征,采用T个所述自注意力层捕获文本依赖关系;基于实体分类结果、定位得到的文本范围以及所述文本依赖关系,在实体文本实例之间构造关系矩阵,采用所述关系矩阵构建实体链接网络,基于所述实体链接网络获取所述文档图像中的文本信息内容。

全文数据:

权利要求:

百度查询: 中国工商银行股份有限公司 文档图像的信息提取方法及装置、电子设备及存储介质

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。