买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：神马人工智能科技(深圳)有限公司

摘要：本发明适用于信息技术领域，提供了基于人工智能的物联网设备视听流实时处理系统，包括：收集模块，所述收集模块用于收集视听流，所述收集模块通过实时流协议将视听流传输给用户终端设备；用户终端设备，所述用户终端设备用于运行WEBRTC图形客户端，所述用户终端设备通过与网络连接的方式访问收集模块和AI云服务器；AI云服务器，所述AI云服务器用于在CPU或GPU以及支持机器学习框架的计算优化芯片上进行推理。本发明通过收集模块、用户终端设备和AI云服务器对视听流进行了处理，为用户提供较好地服务，解决了因数据采集设备的处理能力带来的后续高成本的问题，同时避免了将视听流传输到用户终端设备的延迟。

主权项：1.基于人工智能的物联网设备视听流实时处理系统，其特征在于，包括：收集模块，所述收集模块用于收集视听流，所述收集模块通过实时流协议将视听流传输给用户终端设备；用户终端设备，所述用户终端设备用于运行WEBRTC图形客户端，所述用户终端设备通过与网络连接的方式访问收集模块和AI云服务器；AI云服务器，所述AI云服务器用于在CPU或GPU以及支持机器学习框架的计算优化芯片上进行推理；所述用户终端设备的系统用于实时处理视听流、隔离视频帧序列和音频剪辑；所述用户终端设备与AI云服务器之间建立WEBSOCKET连接；所述用户终端设备从流中提取数据块，并通过WEBSOCKET将其发送到AI云服务器进行计算，在一个图层上显示视频流，用户终端设备在收到来自AI云服务器的答复后，进行新的提取；所述AI云服务器通过WEBSOCKET将推理结果发送回用户终端设备进行显示，在已经显示的一个图层上添加另一个图层以显示AI信息；IOT设备、用户终端设备以及AI云服务器之间交互的具体步骤如下：a.WEBRTC握手：IOT设备和用户终端设备使用第三方服务器交换WEBRTC握手以进行发现，若握手成功，用户终端设备与AI云服务器建立WEBSOCKET连接；b.视频流建立：IOT设备和用户终端设备正在交换视频流，视频显示在用户终端设备层上；c.帧提取和计算：用户终端设备从视频流中提取帧，并通过WEBSOCKET将其发送到AI云服务器进行计算；d.AI信息显示：在计算完成后，AI云服务器通过WEBSOCKET将信息发送回用户终端设备进行显示。

全文数据：

权利要求：

百度查询： 神马人工智能科技(深圳)有限公司 基于人工智能的物联网设备视听流实时处理系统