恭喜中国传媒大学杨成获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网恭喜中国传媒大学申请的专利基于多模态实体对齐的图片描述生成方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN119599014B 。
龙图腾网通过国家知识产权局官网在2025-06-03发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202510142480.3,技术领域涉及:G06F40/284;该发明授权基于多模态实体对齐的图片描述生成方法是由杨成;周劲飞;张亚娜;朱亚平设计研发完成,并于2025-02-10向国家知识产权局提交的专利申请。
本基于多模态实体对齐的图片描述生成方法在说明书摘要公布了:本发明涉及一种基于多模态实体对齐的图片描述生成方法,属于图像处理技术领域,解决了现有技术中图像实体描述准确性不高的问题。具体步骤包括:基于包含标注实体后的图像和与其相关文章的第一样本集,训练得到多模态实体对齐模型;基于包含标注描述后的图像和与其相关文章的第二样本集,利用多模态实体对齐模型,得到实体对齐后的候选实体词;基于第二样本集和候选实体词,训练得到基于多模态实体对齐的图像描述生成模型;基于未标注描述的图像和文章,利用多模态实体对齐模型,得到对应的候选实体词,结合未标注描述的图像和文章,利用所述图像描述生成模型,得到图像描述结果,提升了图像实体选择的召回率和精确率。
本发明授权基于多模态实体对齐的图片描述生成方法在权利要求书中公布了:1.一种基于多模态实体对齐的图片描述生成方法,其特征在于,包括如下步骤:基于包含标注实体后的图像和与其相关文章的第一样本集,训练得到多模态实体对齐模型;基于包含标注描述后的图像和与其相关文章的第二样本集,利用所述多模态实体对齐模型,得到实体对齐后的候选实体词;基于所述第二样本集和所述候选实体词,训练得到基于多模态实体对齐的图像描述生成模型;基于未标注描述的图像和文章,利用所述多模态实体对齐模型,得到对应的候选实体词,结合未标注描述的图像和文章,利用所述图像描述生成模型,得到图像描述结果;所述多模态实体对齐模型包括特征提取模块、多重决策特征融合模块及实体输出网络,其中,特征提取模块,用于分别对包含标注实体后的图像和与其相关文章的样本集进行特征提取,得到图像特征和文章上下文特征,其中,所述文章上下文特征包含多个文章子词特征;多重决策特征融合模块,用于对所述图像特征和文章上下文特征进行跨模态特征融合,得到多个融合子词特征和对应得分;实体输出网络,用于基于所述融合子词特征和对应得分,得到与图像相关的多个实体词。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国传媒大学,其通讯地址为:100024 北京市朝阳区定福庄东街1号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。