首页 专利交易 科技果 科技人才 科技服务 国际服务 商标交易 会员权益 IP管家助手 需求市场 关于龙图腾
 /  免费注册
到顶部 到底部
清空 搜索

控件定位模型训练方法、控件定位及触发方法、装置 

买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!

申请/专利权人:重庆长安科技有限责任公司

摘要:本申请实施例涉及一种控件定位模型训练方法、控件定位及触发方法、装置,上述训练方法包括:获取样本图文对和标注位置信息;利用初始控件定位模型包括的图像特征提取网络和文本特征提取网络,对样本图文对进行图像特征提取和文本特征提取,得到样本图像特征和样本文本特征;利用注意力特征提取网络,对样本图像特征和样本文本特征进行注意力特征提取,得到注意力特征;利用控件位置预测网络,对注意力特征进行控件位置预测,得到表示控件位置的预测位置信息;确定预测位置信息和标注位置信息之间的误差,训练得到控件定位模型。本申请实施例提高了模型对界面图像和文本的匹配精度,从而提高了图文匹配的场景适应性。

主权项:1.一种控件定位模型训练方法,其特征在于,所述方法包括:获取样本图文对和标注位置信息,其中,所述样本图文对包括样本界面图像和样本文本,所述标注位置信息表示目标控件在所述样本界面图像中的位置;利用初始控件定位模型包括的图像特征提取网络和文本特征提取网络,对所述样本图文对进行图像特征提取和文本特征提取,得到样本图像特征和样本文本特征;利用所述初始控件定位模型包括的预训练的注意力特征提取网络,对所述样本图像特征和所述样本文本特征进行注意力特征提取,得到注意力特征;利用所述初始控件定位模型包括的控件位置预测网络,对所述注意力特征进行控件位置预测,得到表示控件位置的预测位置信息;确定所述预测位置信息和所述标注位置信息之间的误差;基于所述误差,调整所述控件位置预测网络的参数;响应于当前的初始控件定位模型符合预设的第一训练结束条件,将当前的初始控件定位模型确定为训练后的控件定位模型。

全文数据:

权利要求:

百度查询: 重庆长安科技有限责任公司 控件定位模型训练方法、控件定位及触发方法、装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。