买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：国能长源汉川发电有限公司;华中科技大学

摘要：本发明公开了一种违规使用手机行为的检测方法、监控方法及电子设备，属于图像处理技术领域，分别使用三个分支进行人体、物体和交互关系检测。每个分支分别通过对应的解码器从图像特征中解码与各自任务相关的特征fiH、fiI、fiO；在这个过程中，通过引入锚框提供空间先验，并通过学习训练集的实例分布，指导查询解码，对每个分支的解码特征均融合fiH、fiI、fiO的相互关系特征和图像特征，从而在解码器之间传递丰富的多重上下文信息，以实现特征增强，进而准确地实现对应的检测任务；其中，关系分支根据人体和物体锚框构建交互区域来获取关系信息，并确保关系分支的关注区域与人、物分支对齐。基于此，本发明能够以较低的成本高效准确地对违规使用手机的行为进行检测。

主权项：1.一种违规使用手机行为的检测方法，其特征在于，包括：将待检测场景图像输入至场景检测模型中，得到场景图像中物体的分类结果及物体与人体的交互关系分类结果；当场景图像中存在分类结果为手机的物体、且人体与该物体的交互关系分类结果为预设违规使用手机的行为类型时，则判定存在违规使用手机行为；所述场景检测模型的构建方法包括：搭建包括特征提取模块、第一至第三分支的场景分析模型；将预设的各人体先验锚框bH与各物体先验锚框bO进行组合，构成P个不重复的二元组锚框{bH,bO}i；i＝1,2,…,P；P为正整数；将训练集中的场景图像输入至所述场景分析模型中，采用特征提取模块提取输入场景图像的图像特征M，并分别输入至第一至第三分支中；在第一分支中，通过其内的第一解码器基于{bH,bO}i中的bH获取M中的人体特征fiH，并将fiH特征增强后的特征FiH通过其内的第一全连接层映射为对应的调整参数，以对{bH,bO}i中的bH进行调整，进而得到人体位置检测结果；在第二分支中，通过其内的第二解码器基于{bH,bO}i中bH与bO的交互区域获取M中的交互特征fiI，并将fiI特征增强后的特征FiI通过其内的第二全连接层映射为物体与人体的交互关系分类结果；在第三分支中，通过其内的第三解码器基于{bH,bO}i中的bO获取M中的物体特征fiO，并将fiO特征增强后的特征FiO通过其内的第三全连接层映射为物体分类结果，将FiO通过其内的第四全连接层映射为对应的调整参数，以对{bH,bO}i中的bO进行调整，进而得到物体位置检测结果；其中，FiH、FiI、FiO为将fiH、fiI、fiO分别融合fiH、fiI、fiO的相互关系特征及M后的特征；通过最小化所得人体位置检测结果、交互关系分类结果、物体分类结果、物体位置检测结果与对应标签之间的差异损失，对所述场景分析模型进行训练；训练完成后，构建包括特征提取模块、第二分支和第三分支的所述场景检测模型。

全文数据：

权利要求：

百度查询： 国能长源汉川发电有限公司 华中科技大学 一种违规使用手机行为的检测方法、监控方法及电子设备