买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：深圳云天励飞技术股份有限公司;青岛云天励飞科技有限公司

摘要：本发明实施例提供一种道路病害界面摘要生成方法，在道路病害摘要模式下，若检测到用户在当前浏览界面停留超过预设时间，则对当前浏览界面进行截取，得到当前浏览界面对应的当前界面图像；通过训练好的特征提取网络对当前界面图像进行特征提取处理，得到当前浏览界面的病害语义特征以及UI界面特征；通过训练好的语义生成网络对病害语义特征以及UI界面特征进行自然语言生成处理，得到当前浏览界面对应的摘要信息；将摘要信息在当前浏览界面中进行展示。通过获取当前界面图像提取出当前浏览界面对应的摘要信息，用户通过摘要信息快速了解当前浏览界面中道路病害的关键信息，使得用户在短时间内对当前浏览界面中关键信息进行浏览，提高浏览效率。

主权项：1.一种道路病害界面摘要生成方法，其特征在于，所述方法包括以下步骤：在道路病害摘要模式下，若检测到用户在当前浏览界面停留超过预设时间，则对所述当前浏览界面进行截取，得到所述当前浏览界面对应的当前界面图像，所述道路病害摘要模式是指道路病害显示终端的摘要模式；获取预训练的特征提取网络和预训练的语义生成网络，以及获取第一数据集，所述第一数据集包括第一样本界面图像以及所述第一样本界面图像对应的第一摘要标签；所述预训练的特征提取网络和所述预训练的语义生成网络之间为深度连接或堆叠连接，所述预训练的特征提取网络为训练好的图像识别模型的特征提取网络，所述预训练的语义生成网络为训练好的语义识别模型的特征处理网络；通过所述第一数据集中的所述第一样本界面图像以及所述第一摘要标签对所述预训练的特征提取网络和所述预训练的语义生成网络进行联合训练；通过所述联合训练，得到训练好的特征提取网络和训练好的语义生成网络；通过训练好的特征提取网络对所述当前界面图像进行特征提取处理，得到所述当前浏览界面的病害语义特征以及UI界面特征，所述UI界面特征为当前浏览界面的颜色特征，排版特征，UI图标的图案以及页面字体特征；通过训练好的语义生成网络对所述病害语义特征以及所述UI界面特征进行自然语言生成处理，得到所述当前浏览界面对应的摘要信息，所述摘要信息为当前浏览界面中道路病害的关键信息；将所述摘要信息在所述当前浏览界面中进行展示。

全文数据：

权利要求：

百度查询： 深圳云天励飞技术股份有限公司 青岛云天励飞科技有限公司 道路病害界面摘要生成方法、装置、电子设备及存储介质