买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：北京师范大学珠海校区

摘要：本发明提供一种中学生物实验操作测评方法、装置、电子设备及存储介质，属于计算机视觉技术领域，所述方法包括：对待检测视频进行特征提取，得到视频特征；将视频特征输入至时序动作检测模型，得到包括预测操作动作起止时间视频片段和动作类别的时序检测结果；将多个视频片段分别输入至目标检测模型，得到包括实验器材检测框和实验器材名称的目标检测结果；基于目标检测结果，确定实验器材的运动情况，进而确定实验操作得分。将时序动作检测应用到实验测评中，对视频中的动态场景进行建模，从而捕捉到人物动作的时间依赖性；结合时序动作检测和目标检测技术，不仅能够识别视频中的实验器材，还能够追踪其运动，从而提高行为分类的准确性。

主权项：1.一种中学生物实验操作测评方法，其特征在于，包括：对待检测视频进行特征提取，得到视频特征；将所述视频特征输入至时序动作检测模型，得到所述时序动作检测模型输出的时序检测结果，所述时序检测结果包括预测操作动作的起止时间对应的视频片段和所述预测操作动作的类别；将多个视频片段分别输入至目标检测模型，得到所述目标检测模型对应输出的多个目标检测结果，所述目标检测结果包括一段视频片段内实验器材的检测框和所述检测框内实验器材的名称；基于各所述目标检测结果，分别确定各所述视频片段中实验器材的运动情况；基于各所述实验器材的运动情况，确定实验操作得分；在所述基于各所述目标检测结果，分别确定各所述视频片段中实验器材的运动情况中，基于如下步骤确定任一个视频片段中实验器材的运动情况：基于预置帧数，对视频片段进行分帧，得到多帧视频图像；使用光流法确定相邻两帧视频图像中的运动点，所述运动点是发生动作的像素点；基于所述视频片段对应的目标检测结果和各所述像素点，确定实验器材的运动情况；其中，所述视频片段对应的目标检测结果包括所述视频片段对应的多帧视频图像的检测框和各所述检测框内实验器材的名称，在所述基于所述视频片段对应的目标检测结果和各所述像素点，确定实验器材的运动情况中，基于如下步骤确定任一帧视频图像中实验器材的运动情况：对于所述视频图像中的任一个检测框，若所述检测框与任一个运动点的距离小于预置距离阈值，则确定所述检测框内的实验器材发生运动。

全文数据：

权利要求：

百度查询： 北京师范大学珠海校区 中学生物实验操作测评方法、装置、电子设备及存储介质