买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:北京妙音数科股份有限公司
摘要:本发明公开了一种虚拟角色的表情与语音同步方法及系统,涉及图像处理技术领域,所述方法包括:激活包括语音信号处理通道和表情生成通道的双通道进行时间戳校准;读取当前设备负载配置预加载窗口,调用语音信号处理通道读取窗口内的音频信号,解析信号并建立带时间标识的语音信号特征,同步至表情生成通道。建立与语音信号特征映射的响应表情,并预生成表情关键帧;接收实时语音信号,基于表情关键帧进行分层表情拟合;评价虚拟角色的输出数据流,建立评价结果并配置平滑帧密度,进行分层表情拟合结果的平滑拟合;通过双通道输出同时间节点下的实时语音信号和平滑拟合结果。进而达成提高同步效率、降低同步延迟、优化同步表现的技术效果。
主权项:1.一种虚拟角色的表情与语音同步方法,其特征在于,所述方法包括:激活双通道,所述双通道包括语音信号处理通道和表情生成通道,对所述双通道进行时间戳校准;读取当前处理设备的设备负载,根据所述设备负载配置预加载窗口,调用所述语音信号处理通道读取预加载窗口内的音频信号,对所述音频信号进行信号解析,建立带有时间标识的语音信号特征;将所述语音信号特征同步至所述表情生成通道,利用表情生成通道建立与语音信号特征映射的响应表情,并预生成表情关键帧;通过所述表情生成通道接收实时语音信号,并基于表情关键帧进行分层表情拟合,建立分层表情拟合结果;执行虚拟角色的输出数据流评价,建立输出数据流评价结果,通过所述输出数据流评价结果配置平滑帧密度,以平滑帧密度进行分层表情拟合结果的平滑拟合;通过所述双通道进行同时间节点下的实时语音信号和平滑拟合结果输出。
全文数据:
权利要求:
百度查询: 北京妙音数科股份有限公司 一种虚拟角色的表情与语音同步方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。