龙图腾网&IPTOP
- 微信扫码登录
- 账号密码登录
- 短信登录/注册
买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！
申请/专利权人：深圳中亿智能系统有限公司
摘要：本发明公开了一种智慧黑板的多模态交互控制方法及系统，包括：获取用户的音视频数据流，生成音视频子段与课程数据及智慧黑板中实时课程内容切片匹配；获取用户的手势特征、语音特征及课程内容场景特征，进行自适应多模态融合，生成多模态数据流；构建交互识别分类模型，获取用户的交互控制偏好进行优化，输出用户的交互意图，利用交互意图生成控制响应；并将用户满意度反馈至交互识别分类模型进行识别分类性能优化，并持续更新用户的交互控制偏好。本发明采用多模态交互方式，提高了用户与智慧黑板人机交互的意图识别率及交互鲁棒性，同时大大减少了单模态交互中误识别率过大及交互过程复杂导致的识别效率低等异常状态。
主权项：1.一种智慧黑板的多模态交互控制方法，其特征在于，包括以下步骤：利用视觉设备获取用户的音视频数据流，将所述音视频数据流进行预处理生成音视频子段，获取课程数据及智慧黑板中实时课程内容切片，利用时序与所述音视频子段匹配；根据匹配后的实时课程内容切片及音视频子段获取用户的手势特征、语音特征及课程内容场景特征，将获取的手势特征、语音特征及课程内容场景特征进行自适应多模态融合，生成多模态数据流；构建交互识别分类模型，获取用户的交互控制偏好对所述交互识别分类模型进行优化，捕捉用户行为序列与课程内容变化的关系，生成用户的交互意图，利用所述交互意图生成控制响应；获取用户对所述控制响应的满意度，将所述满意度反馈至交互识别分类模型进行识别分类性能优化，并持续更新用户的交互控制偏好。
全文数据：
权利要求：
百度查询： 深圳中亿智能系统有限公司 一种智慧黑板的多模态交互控制方法及系统
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。
主营中国专利交易买卖与专利转让许可,高校科技成果推广与科技成果转化,知识产权运营管理与平台开发,科技人才专家库与科技猎头等科技服务
开放平台
担保交易
惠及多方
会员特惠
专属平台
适合多方
数据共享
功能齐全
皖公网安备 34010402703815号