买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜广州炫视智能科技有限公司申请的专利一种基于多模态的人机交互方法及其系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119806335B 。

龙图腾网通过国家知识产权局官网在2025-05-27发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202510293143.4，技术领域涉及：G06F3/01；该发明授权一种基于多模态的人机交互方法及其系统是由谢志文;蔡芷霞;何卉婷设计研发完成，并于2025-03-13向国家知识产权局提交的专利申请。

本一种基于多模态的人机交互方法及其系统在说明书摘要公布了：本发明提供一种基于多模态的人机交互方法及其系统，涉及人机交互技术领域，通过接收用户的语音输入、采集环境信息以及捕捉用户的面部表情，并基于这些输入分别获取语音特征、环境特征和面部特征；利用预训练的情感识别模型生成用户的情感特征，同时根据用户的当前操作信息，利用预训练的用户行为模型生成行为特征；在得到这些特征后，本发明通过动态调整各自的第一权重和第二权重，并进行特征加权融合，得到综合特征；基于综合特征生成多个候选响应，并利用预设的评分机制筛选出最终响应并输出，本发明通过综合利用多种数据源，实现了对用户意图和情感状态的全面理解，同时能够动态调整各特征的权重，以生成更加智能、人性化的交互体验。

本发明授权一种基于多模态的人机交互方法及其系统在权利要求书中公布了：1.一种基于多模态的人机交互方法，其特征在于，所述交互方法包括以下步骤：接收用户的语音输入、采集环境信息以及捕捉用户的面部表情，并基于所述语音输入、环境信息和面部表情分别获取语音特征、环境特征和面部特征；基于所述语音特征和面部特征生成用户的情感特征；根据用户的当前操作信息，利用预训练的用户行为模型生成行为特征；基于所述语音特征、环境特征、情感特征和行为特征的表征动态调整各自的第一权重和第二权重，并基于所述第一权重和第二权重进行特征加权融合，得到综合特征，其中所述第一权重为特征重要性权重，用于反映不同特征在交互过程中的相对重要程度，第二权重为注意力权重，用于调整不同特征在融合过程中的影响度；其中，第一权重的调整具体包括：基于实时捕获并解析的各特征的当前表征数据，利用统计方法计算得到各特征在当前交互情境下的重要性评分，并根据重要性评分对各特征进行权重分配，得到与重要性得分呈正相关的各特征的第一权重，其中当前表征数据包括各特征的量化值、变化率，以及与当前交互上下文的关联程度；第二权重的调整具体包括：基于实时捕获并记录用户在接收到交互设备发出语音指令后的反应时间，利用注意力分配模型计算出当前交互情境下用户对各特征的注意力分配程度，并根据注意力分配程度动态调整与其呈正相关的各特征的第二权重；根据所述综合特征生成多个候选响应，并利用预设的评分机制对所述多个候选响应进行筛选，得到最终响应并输出。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人广州炫视智能科技有限公司，其通讯地址为：510000 广东省广州市番禺区东环街东星路95号东星大厦708；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。