买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
申请/专利权人:新疆大学
摘要:本发明公开了一种基于异构空间融合和双维度注意力的语音增强方法,主要涉及语音信号处理的语音增强技术领域;包括步骤:S1、输入端采用两个不同空间特征的分支进行馈送,其中,一个分支首先通过STFT将语音波形数据转化为语谱图,然后使用ODConv模块从语谱图中提取关键信息;另一个分支将语音数据输入到自监督模型中,提取高层语义信息;S2、通过级联操作将两个分支输出的特征在时间维度上进行融合,然后将其输入到DDA模块中;S3、通过前馈层对数据进行处理后输出;本发明能实现跨越各个维度的关键信息的整合与提取,对conformer模型进行强化,增强其不仅在时间维度上的特征提取能力,而且在频率维度上的特征提取能力。
主权项:1.一种基于异构空间融合和双维度注意力的语音增强方法,其特征是,包括步骤:S1、输入端采用两个不同空间特征的分支进行馈送,其中,一个分支首先通过STFT将语音波形数据转化为语谱图,然后使用ODConv模块从语谱图中提取关键信息;另一个分支将语音数据输入到自监督模型中,提取高层语义信息;S2、通过级联操作将两个分支输出的特征在时间维度上进行融合,然后将其输入到DDA模块中;S3、通过前馈层对数据进行处理后输出。
全文数据:
权利要求:
百度查询: 新疆大学 一种基于异构空间融合和双维度注意力的语音增强方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。