买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：深圳市科路教育科技有限公司

摘要：本发明涉及视频直播控制技术领域，尤其涉及一种基于移动网络的教学视频直播控制方法。所述方法包括以下步骤：通过系统直播设备的异构传感器组获取异构数据流；对异构数据流进行时空对齐校准预处理，得到时空对齐多模态数据；对时空对齐多模态数据进行多模态数据融合，得到多模态同步数据流；对多模态同步数据流进行跨模态特征对齐，得到跨模态对齐特征数据；根据跨模态对齐特征数据进行教学场景知识图谱化，得到教学场景知识图谱。本发明通过数据驱动、智能协同的控制方式克服了传统直播系统的不足，提升控制策略的适应性和设备协同的效率，允许非专业人员例如教师通过简单的交互方式参与控制，降低了操作门槛，改善教学直播的用户体验。

主权项：1.一种基于移动网络的教学视频直播控制方法，其特征在于，包括以下步骤：步骤S1：通过系统直播设备的异构传感器组获取异构数据流；对异构数据流进行时空对齐校准预处理，得到时空对齐多模态数据；对时空对齐多模态数据进行多模态数据融合，得到多模态同步数据流；步骤S2：对多模态同步数据流进行跨模态特征对齐，得到跨模态对齐特征数据；根据跨模态对齐特征数据进行教学场景知识图谱化，得到教学场景知识图谱；步骤S3：根据多模态同步数据流、教学场景知识图谱以及预构建的教学策略知识库进行教学场景候选策略集提取，得到教学场景候选策略集；对教学场景候选策略集进行策略适应性评估并进行动态组合优化，得到最优策略组合数据；根据最优策略组合数据进行智能直播策略建模，得到智能直播策略模型；其中，步骤S3包括以下步骤：步骤S31：对多模态同步数据流进行当前教学场景数据提取，得到当前教学场景数据；利用教学场景知识图谱对当前教学场景数据进行教学场景深度语义解析，得到场景语义特征向量；步骤S32：将场景语义特征向量与预构建的教学策略知识库进行策略匹配并进行检索，得到教学场景候选策略集；步骤S33：对教学场景候选策略集进行策略适应性评估，得到策略适应性评分向量；根据策略适应性评分向量进行动态组合优化，得到最优策略组合数据；其中，步骤S33包括以下步骤：步骤S331：对教学场景候选策略集进行策略特征映射，得到策略特征矩阵；基于场景语义特征向量以及策略特征矩阵进行策略场景相似度计算，得到策略场景相似度向量；步骤S332：利用策略场景相似度向量对教学场景候选策略集进行策略效果预测，得到策略效果预测值；步骤S333：根据策略效果预测值以及策略场景相似度向量进行策略适应性度量，得到策略适应性评分向量；步骤S334：根据策略适应性评分向量对教学场景候选策略集进行候选策略排序，得到有序候选策略序列；步骤S335：根据有序候选策略序列进行策略组成生成，得到策略组合集合；根据当前教学场景数据对策略组合集合进行组合效果评估，得到组合效果评估值向量；步骤S336：根据组合效果评估值向量对策略组合集合进行策略动态组合优化，得到最优策略组合数据；步骤S34：对最优策略组合数据进行策略细化并进行参数化，得到参数化策略规划数据；对参数化策略规划数据进行策略模拟验证，得到策略规划验证数据；步骤S35：根据策略规划验证数据进行智能直播策略模型构建，得到智能直播策略模型；步骤S4：获取系统直播设备数据；根据智能直播策略模型以及系统直播设备数据进行直播设备时序控制指令优化，得到时序优化指令集；通过系统直播设备获取人工输入控制指令数据；根据工输入控制指令数据以及时序优化指令集进行人机交互指令融合，得到人机融合指令集；根据人机融合指令集进行混合控制指令生成，得到混合控制指令集；其中，步骤S4包括以下步骤：步骤S41：根据智能直播策略模型进行策略解析并进行控制逻辑映射，得到策略控制映射表；步骤S42：获取系统直播设备数据；对系统直播设备数据进行抽象和归纳，以提取设备的关键能力和参数，得到设备能力抽象数据；其中设备的关键能力和参数包括摄像机的分辨率和音频采集的频率范围；根据设备能力抽象数据进行设备能力模型构建，得到设备能力模型库；步骤S43：根据设备能力模型库对策略控制映射表进行引擎控制指令生成，得到设备控制指令集；对设备控制指令集进行指令时序优化，得到时序优化指令集；步骤S44：通过系统直播设备获取人工输入控制指令数据；根据工输入控制指令数据以及时序优化指令集进行人机交互指令融合，得到人机融合指令集；其中，步骤S44包括以下步骤：步骤S441：对人工输入控制指令数据进行人机交互意图识别，得到人工控制意图集；对人工控制意图集进行多通道指令解析，得到多通道控制指令集；步骤S442：根据多通道控制指令集进行设备指令映射，得到人工控制指令集；对人工控制指令集进行指令时序分析，得到指令时序约束集；步骤S443：对指令时序约束集以及时序优化指令集进行人机指令同步，得到同步控制指令集；步骤S444：对同步控制指令集进行指令冲突检测，得到指令冲突数据；对指令冲突数据进行指令冲突消解，得到指令冲突消解数据；步骤S445：根据指令冲突数据以及指令冲突消解数据进行无冲突指令集生成，得到无冲突指令集；对无冲突指令集进行指令权重分配，得到指令权重向量数据；步骤S446：根据指令权重向量数据对无冲突指令集进行指令融合优化，得到融合控制指令集；根据融合控制指令集进行人机协同控制，得到人机协同控制指令集；步骤S45：获取网络环境数据；根据网络环境数据对人机协同控制指令集进行指令适应性优化，得到自适应网络优化指令集；对自适应网络优化指令集进行指令编码并进行指令封装，得到混合控制指令集；步骤S5：根据混合控制指令集进行多设备协同控制处理，得到设备协同控制计划数据；根据设备协同控制计划数据进行控制冲突检测并进行设备指令执行处理，得到设备执行状态反馈数据；步骤S6：通过移动网络根据设备执行状态反馈数据进行教学视频数据加密传输，以实现教学视频直播控制作业。

全文数据：

权利要求：

百度查询： 深圳市科路教育科技有限公司 一种基于移动网络的教学视频直播控制方法