买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明适用于VR全息技术领域,提供了一种用于VR全息剧场的联动控制方法与系统,包括:调取VR全息表演场景、VR人物模型和灯光音效数据,为每个VR人物模型确定一个动作捕捉演员对象;接收演员收音控制指令,所述演员收音控制指令包括若干个VR人物模型,每个VR人物模型对应有收音时间;生成VR模型轨迹选择弹窗,接收轨迹方式选择指令,确定VR模型轨迹方式;接收剧场表演开始指令,对演员动作进行捕捉确定对应的VR人物模型姿态,根据演员收音控制指令采集VR人物模型声音,根据VR模型轨迹方式确定VR人物模型轨迹。本发明中,VR全息剧场所展示的剧目中的人物体态、动作和声音都是由真人得到的,更加灵动,感染力更强。
主权项:1.一种用于VR全息剧场的联动控制方法,其特征在于,所述方法包括以下步骤:调取VR全息表演场景、VR人物模型和灯光音效数据,为每个VR人物模型确定一个动作捕捉演员对象;接收演员收音控制指令,所述演员收音控制指令包括若干个VR人物模型,每个VR人物模型对应有收音时间;生成VR模型轨迹选择弹窗,弹窗内容为预设轨迹和跟随轨迹,接收轨迹方式选择指令,确定VR模型轨迹方式;接收剧场表演开始指令,对演员动作进行捕捉确定对应的VR人物模型姿态,根据演员收音控制指令采集VR人物模型声音,根据VR模型轨迹方式确定VR人物模型轨迹;根据VR人物模型、VR人物模型姿态、VR人物模型轨迹以及VR全息表演场景对全息成像系统进行控制,根据灯光音效数据和VR人物模型声音对音响灯光系统进行控制;所述调取VR全息表演场景、VR人物模型和灯光音效数据,为每个VR人物模型确定一个动作捕捉演员对象的步骤包括如下子步骤:构建VR资源数据库,所述VR资源数据库用于存储VR全息表演场景、VR人物模型以及灯光音效数据;获取全息剧场的历史表演数据、用户偏好以及当前的表演需求,基于获取的历史表演数据、用户偏好以及当前的表演需求在所述VR资源数据库中生成对应的VR全息表演场景、VR人物模型和灯光音效数据推荐组合;基于所述推荐组合中的VR人物模型的特征,在预设演员对象库中匹配对应的动作捕捉演员对象;为选定的动作捕捉演员对象配置动作捕捉设备,并进行校准以确保捕捉到的动作数据同步映射到对应的VR人物模型上;所述对演员动作进行捕捉确定对应的VR人物模型姿态的步骤,具体包括:基于动作捕捉套装采集演员的动作数据,将所述动作数据传输到动作捕捉软件中,所述动作捕捉套装包括若干个传感器节点,传感器节点被绑定在人体的关键部位;将收集到的动作数据输入至对应的VR人物模型,将动作数据转换为VR人物模型姿态;其中,将动作数据转换为VR人物模型姿态的步骤包括如下子步骤:对所述动作数据进行预处理,将预处理后的动作数据映射到VR人物模型的骨骼系统上以得到骨骼映射结果;根据所述骨骼映射结果,基于逆运动学算法计算得出VR人物模型中的每个关节角度;基于计算得到的每个关节角度,对所述VR人物模型进行渲染更新以得到最新的VR人物模型姿态;所述根据VR模型轨迹方式确定VR人物模型轨迹的步骤,具体包括:当VR模型轨迹方式为预设轨迹时,调取人物轨迹库中的轨迹数据作为VR人物模型轨迹;当VR模型轨迹方式为跟随轨迹时,对演员对象进行实时监控,得到实时位置信息,根据实时位置信息确定VR人物模型轨迹;所述对演员对象进行实时监控,得到实时位置信息的步骤,具体包括:根据俯视摄像头采集演员表演俯视图像,为演员表演俯视图像中的每个演员对象进行特征框标记,每个演员对象的特征框颜色不同;根据特征框的实时位置确定对应的演员对象的平面位置信息;根据传感器采集的高度数据确定演员对象的高度信息,根据平面位置信息和高度信息得到实时位置信息;所述根据VR人物模型、VR人物模型姿态、VR人物模型轨迹以及VR全息表演场景对全息成像系统进行控制,根据灯光音效数据和VR人物模型声音对音响灯光系统进行控制的步骤,包括如下子步骤:将VR人物模型、VR人物模型姿态、VR人物模型轨迹以及VR全息表演场景进行整合以得到VR综合场景,并确定人物在VR综合场景中的动作和位置;利用图形处理器,实时渲染VR人物模型和VR全息表演场景的全息图像,根据VR人物模型姿态与VR人物模型轨迹,动态更新全息图像中人物的动作和位置;将渲染好的全息图像通过全息投影系统投影到剧场中的全息屏幕上,并利用图像融合技术以形成连贯的全息影像;根据VR全息表演场景中的光照需求,当监测到VR人物模型移动到不同场景区域时,通过灯光系统自动切换与当前场景区域对应的灯光模式;根据VR人物模型的位置和轨迹,当监测到VR人物模型移动或发出声音时,通过音响系统调整声音的音量与方向。
全文数据:
权利要求:
百度查询: 南昌市一境信息技术有限公司 一种用于VR全息剧场的联动控制方法与系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。