龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：广州视源电子科技股份有限公司;广州视源人工智能创新研究院有限公司
摘要：本发明属于虚拟数字人领域，公开了一种二维人像视频生成方法、装置、计算机设备及介质，包括：获取用户的模板视频；根据模板视频中的图像，计算全脸表情系数；根据模板视频中的图像、音频和全脸表情系数对第一图像神经网络模型和第一口型神经网络模型进行训练；获取用户的语音文件，并将语音文件输入第二口型神经网络模型中得到口型表情系数；根据全脸表情系数和口型表情系数得到二维人像；合成二维人像和语音文件，得到二维人像视频。本发明将第一人脸渲染图像和模板视频中的图像进行融合，这样就保留了原始图像中难以通过图像生成方式生成的细节部分。本发明通过训练从特征到图像映射的模型来实现二维人像视频的可控生成，简单快捷，成本低。
主权项：1.一种二维人像视频生成方法，其特征在于，包括：获取用户的模板视频；根据所述模板视频中的图像，计算全脸表情系数；根据所述模板视频中的图像和所述全脸表情系数对第一图像神经网络模型进行训练，得到第二图像神经网络模型，同时根据所述模板视频中的音频和所述全脸表情系数对第一口型神经网络模型进行训练，得到第二口型神经网络模型；获取所述用户的语音文件，并将所述语音文件输入所述第二口型神经网络模型中得到口型表情系数；将所述全脸表情系数和所述口型表情系数进行融合，得到融合表情系数；根据所述融合表情系数控制预设的三维人脸模型进行变化并渲染，得到第一人脸渲染图像；将所述第一人脸渲染图像和所述模板视频中的图像进行融合，得到第一人脸融合图像；将所述第一人脸融合图像输入所述第二图像神经网络模型得到二维人像；合成所述二维人像和所述语音文件，得到二维人像视频。
全文数据：
权利要求：
百度查询： 广州视源电子科技股份有限公司 广州视源人工智能创新研究院有限公司 二维人像视频生成方法、装置、计算机设备及介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号