买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:公安部道路交通安全研究中心;深圳市阿瑞斯科技有限公司
摘要:本发明公开了一种动作规范训练系统,属于训练技术以及数据处理技术领域,通过为每个训练人员进行权限管理,使存在权限的训练人员能够进行自主训练,为训练人员提供训练参照数据,并且采集训练人员在训练过程中产生的视觉及语音数据,对这些数据采用统一的约束条件进行识别,从而使训练过程中评判标准统一,并且最终对相似度进行识别,可以精准地知晓训练人员的训练效果;除了训练之外,还可以提供交互考核场景,从而实现训练考核,能够有效地提升交通指挥的规范性。
主权项:1.一种动作规范训练系统,其特征在于,包括:权限信息获取模块、训练参照模块、数据采集模块、视觉数据分析模块、语音数据分析模块、交互考核模块以及分析结果存储模块;所述权限信息获取模块,用于获取训练人员的身份信息,并对所述身份信息进行验证,获取身份验证结果,当所述身份验证结果为身份验证通过时,则为训练人员开放训练参照模块、数据采集模块、视觉数据分析模块以及分析结果存储模块的使用权限,所述身份验证结果包括身份验证通过或者身份验证不通过;所述训练参照模块,用于为训练人员提供训练参照数据的预览,并基于该预览,获取训练人员通过人机交互输入的确定指令,以播放确定指令对应的目标训练参照数据;所述训练参照数据包括视频数据以及图像数据,所述视频数据中设置有参照语音以及插帧有对齐帧;所述数据采集模块,用于确定目标训练参照数据的数据类型,当数据类型为视频数据时,采集训练人员的训练视频;当数据类型为图像数据时,采集训练人员的训练图像;所述视觉数据分析模块,用于根据数据采集模块采集的训练视频或者训练图像,采用目标训练参照数据作为参照,进行训练人员的训练过程分析,获取视觉分析结果;所述语音数据分析模块,用于提取训练视频对应的语音数据,并以训练参照数据中的参照语音为基础,进行训练人员的语音数据分析,获取语音分析结果;所述交互考核模块,用于提供交互问答场景,并获取训练人员回答的考核视频,联合调度视觉数据分析模块以及语音数据分析模块对考核视频进行分析,获取考核分析结果;每个交互问答场景均关联有训练参照数据;所述分析结果存储模块,用于将视觉分析结果以及语音分析结果共同作为训练分析结果,将训练分析结果以及考核分析结果与训练人员的身份信息关联存储,并允许系统管理员通过广域网或者局域网远程查看训练分析结果;所述视觉数据分析模块包括调用单元、第一分析单元以及第二分析单元;所述调用单元,用于当第一视觉采集单元传输训练视频时,则调用第一分析单元进行分析;当第二视觉采集单元传输训练图像时,则调用第二分析单元进行分析;所述第一分析单元,用于将数据采集模块采集的训练视频输入第一特征提取模型,以获取包含关节点特征的训练视频;以对齐帧为基础,将训练视频与目标训练参照数据对齐,并提取训练视频与目标训练参照数据中的关键帧;以提取的关键帧为基础,进行训练动作相似对比,以获取训练分析结果;所述第二分析单元,用于将数据采集模块采集的图像数据与目标训练参照数据输入第二特征提取模型,以提取图像数据对应的第一关节图像以及目标训练参照数据对应的第二关节图像,并将第一关节图像与第二关节图像拼接,获取第一拼接图像,将第一拼接图像输入第一图像分析模型中,以获取训练分析结果;将数据采集模块采集的训练视频输入第一特征提取模型,以获取包含关节点特征的训练视频;以对齐帧为基础,将训练视频与目标训练参照数据对齐,并提取训练视频与目标训练参照数据中的关键帧;以提取的关键帧为基础,进行训练动作相似对比,以获取训练分析结果,包括:将数据采集模块采集的训练视频输入第一特征提取模型,以获取包含关节点特征的训练视频;将目标训练参照数据输入第一特征提取模型,以获取包含关节点特征的目标训练参照数据;以对齐帧为基础,将包含关节点特征的训练视频与包含关节点特征的目标训练参照数据对齐,以第一个对齐帧为起点,从包含关节点特征的训练视频与包含关节点特征的目标训练参照数据中抽取相同时间点的关键帧,得到多个时间点上的第一关键帧以及第二关键帧;其中,第一关键帧用于表征包含关节点特征的训练视频中抽取的关键帧,第二关键帧用于表征包含关节点特征的目标训练参照数据中抽取的关键帧;针对每个时间点,将第一关键帧与第二关键帧进行拼接,获取第二拼接图像,并将第二拼接图像输入第二图像分析模型中,以获取训练动作相似度;将每个时间点对应的训练动作相似度相加,并求取平均值,得到训练分析结果。
全文数据:
权利要求:
百度查询: 公安部道路交通安全研究中心 深圳市阿瑞斯科技有限公司 一种动作规范训练系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。