买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：林德拉股份有限公司

摘要：本发明公开了一种用于将测试帧序列与参考帧序列进行匹配的计算机实施的方法、计算机程序产品和计算机系统。对于参考帧序列的每一帧，姿态数据文件表示虚拟球面上的多个二维骨架投影。对于特定帧，球面上的每个二维骨架投影对应于来自不同视场角的第一人的三维骨架的二维参考姿态图像。测试帧序列表示第二人在进行体育锻炼时的运动。实时二维骨架检测器模块检测在测试帧序列的每个接收到的测试帧中的第二人的二维骨架。姿态匹配模块选择具有到当前测试帧中的第二人的二维骨架的最小数学距离的第一人的特定二维骨架投影，以将当前测试帧中的第二人的当前姿态与姿态数据文件的对应参考姿态图像进行匹配。

主权项：1.一种用于将测试帧序列201与参考帧序列202进行匹配的计算机实施的方法1000，所述参考帧序列202演示由第一人进行的体育锻炼，所述方法包含：接收1100姿态数据文件203，所述姿态数据文件基于表示所述第一人的三维骨架10的多个关节在相应帧Fn中的位置的三维关节坐标的列表，对于所述参考帧序列202的至少一个帧子集Fr1至Frn，来表示虚拟球面203s，203'上的多个二维骨架投影10p1，10p2，10p1'，10p2'，其中所述三维骨架的特定关节10cj位于所述球面203s，203s'的几何中心处，其中所述子集Fr1至Frn的特定帧的每个二维骨架投影10p1，10p2对应于来自不同视场角的所述第一人的所述三维骨架10的二维参考姿态图像，其中所述二维参考姿态图像是所述体育锻炼的特征姿态；接收1200所述测试帧序列201，所述测试帧序列表示第二人2在模仿所述体育锻炼t1-t2-t3时的运动，所述测试帧序列由标准RGB摄像机装置200在特定角度处捕捉；用实时二维骨架检测器检测1300在所述测试帧序列的当前测试帧中的所述第二人2的二维骨架20，其中所述第二人的所述二维骨架是所述第二人在相应测试帧中的姿态的二维表示；以及选择1400所述第一人的特定二维骨架投影10p1，以将所述当前测试帧Fc中的所述第二人2的当前姿态与所述姿态数据文件中的对应参考姿态表示进行匹配，所述特定二维骨架投影表示在对应于所述标准RGB摄像机装置的所述特定角度的视场角处的所述对应参考姿态，其中选择1400通过以下任一方式实现：选择具有到所述当前测试帧Fc中的所述第二人的所述二维骨架20的最小数学距离的所述第一人的特定二维骨架投影10p1；或将所述当前测试帧Fc中的所述第二人的所述二维骨架提供给神经网络122以预测与所述当前测试帧相关联的视角r，Φ，θ，所述神经网络122用示出进行锻炼时的用户姿态的多个训练帧作为输入来训练，其中每个训练帧用对应视角r，Φ，θ作为地面实况来注释；以及选择位于对应于所预测的视角r，Φ，θ的球体坐标处的所述第一人的所述特定二维骨架投影10p1，其中所述视角r，Φ，θ通过用户与摄像机之间的距离r以及视场角来描述，所述视场角由方位角Φ和极角θ定义。

全文数据：

权利要求：

百度查询： 林德拉股份有限公司 用于将测试帧序列与参考帧序列进行匹配的系统和方法