中国计量大学姚森均获国家专利权
买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
龙图腾网获悉中国计量大学申请的专利基于人体骨架特征的3D卷积神经网络不安全行为检测方法获国家发明授权专利权,本发明授权专利权由国家知识产权局授予,授权公告号为:CN114120444B 。
龙图腾网通过国家知识产权局官网在2025-08-01发布的发明授权授权公告中获悉:该发明授权的专利申请号/专利号为:202111361515.0,技术领域涉及:G06V40/20;该发明授权基于人体骨架特征的3D卷积神经网络不安全行为检测方法是由姚森均;范昕炜设计研发完成,并于2021-11-17向国家知识产权局提交的专利申请。
本基于人体骨架特征的3D卷积神经网络不安全行为检测方法在说明书摘要公布了:本发明公开了一种基于人体骨架特征的3D卷积神经网络不安全行为检测系统。发明涉及人体目标检测、人体姿态以及人体行为识别技术领域。该系统可以通过输入安全生产作业场所实时监控画面,通过YOLOX‑Tiny算法模型得到人体最小矩形包围框的坐标信息,减少视频冗余,随后使用LiteHRNet生成人体骨骼特征向量,最后基于PoseC3D人体动作识别网络模型来对作业人员是否存在不安全行为进行判断和行为分类。本发明采用轻量化算法,同时对输入视频影像进行逐帧冗余过滤,保留关键信息,在保障了识别精度的前提下提高了动作识别的实时性。
本发明授权基于人体骨架特征的3D卷积神经网络不安全行为检测方法在权利要求书中公布了:1.基于人体骨架特征的3D卷积神经网络不安全行为检测方法,其特征在于,该方法包括如下步骤: 步骤一:通过视频采集设备获取实时视频影像; 步骤二:采用YOLOX-Tiny算法对所述视频影像中的人进行识别,得到所述视频影像中出现的人的总个数以及各个人的最小矩形包围框的坐标和置信度,设定置信度阈值; 步骤三:采用LiteHRNet算法对经过上述步骤二的处理后的待识别对象进行识别,对其中置信度高于设定阈值的人体最小矩形包围框进行人体姿态估计,获取人体重要骨架关节点坐标,将人体骨架关节点依照人体各肢体关节位置进行串接,形成人体骨架特征向量; 步骤四:采用PoseC3D算法对上述步骤三中的人体骨架特征向量进行行行为识别,判断人员是否存在不安全行为; 上述步骤二中包含; 1收集包含不安全行为的样本视频作为正样本集,并收集其他各类姿态下的人体视频作为负样本集,将各样本集依照COCO数据集格式合并为一个数据集,依照8:1:1的比例,将上述两个数据集进行统一处理融合后的数据集划分为训练集、验证集和测试集; 2所用YOLOX-Tiny算法模型采用CSPDarknet为backbone,YOLOXAFPN为neck,YOLOXHead为bbox_head所构建; 3采用上述数据集对YOLOX-Tiny算法模型进行训练,建立具有高鲁棒性的人体目标检测模型; 4将视频输入的帧图片重置为416×416像素分辨率的图片,保留图片原始的位置信息和缩放比例,对于空白部分进行空白填充; 5根据上述所得目标检测模型对上述输入的帧图片信息预测,获得人体所处矩形包围框坐标信息和预测置信度; 所述的步骤三包括如下: 1所用LiteHRNet网络模型采用LiteHRNet-18为backbone和neck,TopDownSimpleHead为keypoint_head所构建; 2采用上述的数据集集对LiteHRNet网络模型进行训练,建立人体骨架特征向量预测模型; 3采用上述的输入的帧图片以图片流的形式,连同上述获得的人体所处矩形包围框坐标信息和预测置信度,作为输入,通过上述训练完成后的LiteHRNet模型进行预测; 4在上述输入的图片流中,仅对帧图片中处于步骤三中获得的人体最小矩形包围框范围内的区域进行人体骨架特征向量的预测; 所述的步骤四包括如下步骤: 1所用PoseC3D算法模型采用ResNet3dSlowOnly为backbone和neck,I3DHead为class_head所构建; 2采用上述的数据集对PoseC3D网络模型进行训练,建立基于人体骨架特征向量的行为识别预测模型; 3上述所建立的人体骨架特征向量,生成2D姿态图,堆叠T张形状为K×H×W的二维关键点热图以生成形状为K×T×H×W的3D热图; 4将上述所获得的3D热图堆叠输入到PoseC3D模型当中进行识别,以64帧的实践窗口为时长进行采帧,之后采用均匀采样的方式,将其分成长度相同的N段,在每段中选取一帧,共采集N帧进行行为识别,通过预先训练好的分类器,判断行为是否为不安全行为并进行分类。
如需购买、转让、实施、许可或投资类似专利技术,可联系本专利的申请人或专利权人中国计量大学,其通讯地址为:310018 浙江省杭州市钱塘区学源街258号;或者联系龙图腾网官方客服,联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。