买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:苏州元脑智能科技有限公司
摘要:本申请涉及一种数字人文本动作生成方法、装置、计算机设备和存储介质,所属领域为数字人技术领域,所述方法包括:获取大数据集和小数据集;根据大数据集,确定目标训练集,基于目标训练集和多目标损失函数对第一数字人文本动作模型进行预训练,得到其第一参数;根据目标任务场景,选取第一数字人文本动作模型中的多个组成结构,生成第二数字人文本动作模型,并基于小数据集,对第二数字人文本动作模型进行训练,生成目标数字人文本动作模型;基于目标数字人文本动作模型,对数字人文本动作生成指令对应的数据信息进行特征提取及融合,生成目标数字人文本动作。本申请可以有效提高数字人文本动作生成的效率和准确度。
主权项:1.一种数字人文本动作生成方法,其特征在于,所述方法包括:基于中央处理器,从历史数据库中获取数字人对应的大数据集和目标任务场景对应的小数据集;根据所述大数据集,确定由至少一个文本双向模态信息及其对应的动作单向模态信息生成的目标训练集,基于所述目标训练集和多目标损失函数对第一数字人文本动作模型进行预训练,得到所述第一数字人文本动作模型的第一参数,其中,所述多目标损失函数用于确定所述第一数字人文本动作模型是否完成预训练;根据目标任务场景,选取所述第一数字人文本动作模型中的多个组成结构,生成第二数字人文本动作模型,并基于所述小数据集,对所述第二数字人文本动作模型进行训练,以对所述第一参数进行调整,得到所述第二数字人文本动作模型的第二参数,并基于所述第二参数,生成目标数字人文本动作模型;基于所述目标数字人文本动作模型,对数字人文本动作生成指令对应的数据信息进行特征提取及融合,得到多模态融合特征信息,并基于所述多模态融合特征信息,生成目标数字人文本动作。
全文数据:
权利要求:
百度查询: 苏州元脑智能科技有限公司 数字人文本动作生成方法、装置、计算机设备和存储介质
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。