买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

申请/专利权人：郑州大学

摘要：本发明提供了一种基于MAPPO和RLNC的无人机集群协作式数据传输方法，所述方法包括：每个无人机获取机器学习算法评估指标、无人机集群编码策略和环境参数，并对传输过程参数进行配置；每个无人机分别将无人机集群协作式数据传输问题定义为多主体分散部分可观测马尔可夫决策过程，设置无人机的观测空间、动作空间和奖励函数；基于无人机的观测空间等每个无人机分别对预先构建的神经网络模型进行训练，预先构建的神经网络模型采用改进后的多智能体近端策略优化算法；训练后，得到感知源数据包的无人机集群最佳编码策略。因此，本发明通过调整重点信息的传输，在保证感知数据的可靠性和时效性的前提下，尽可能提升服务器端基于传输数据的相关机器学习算法分析处理效率。

主权项：1.一种基于MAPPO和RLNC的无人机集群协作式数据传输方法，其特征在于，包括：步骤1，每个无人机获取机器学习算法评估指标C、无人机集群编码策略E和环境参数；其中，环境参数包括目标区域的二维范围、无人机集群自组织网络中的无人机数量N、无人机初始位置di、源数据包数量和源数据包优先级分布每个无人机分别对传输过程参数进行配置；其中，无人机i的传输过程参数包括源数据包集合Ai、编码包集合Si、无人机无线电覆盖范围Di、无人机默认带宽bi、数据包传输时间限制T、网络广播时间限制Tsd和时间片长度Δt；步骤2，每个无人机分别将无人机集群协作式数据传输问题定义为多主体分散部分可观测马尔可夫决策过程，设置无人机的观测空间、动作空间和奖励函数；步骤3，基于无人机的观测空间、动作空间和奖励函数，每个无人机分别对预先构建的神经网络模型进行训练；其中，预先构建的神经网络模型采用改进后的多智能体近端策略优化算法；步骤3.1，无人机i将所述机器学习算法评估指标C、所述无人机集群编码策略E、所述环境参数和所述传输过程参数，分别输入至预先构建的神经网络模型；步骤3.2，每个时间片开始时，无人机i判断等待时间是否达到数据包传输时间限制T；若是，则执行：服务器对已缓存的编码包进行解码，计算本轮奖励rit，并将计算出的奖励rit返回至对应无人机i；无人机i读取对应的当前环境状态St和动作ait，结合接收到的奖励rit得到新的状态组St，ait，rit，将新的状态组St，ait，rit存入经验回放缓冲区；无人机i重置无人机自组织网络环境，并基于改进后的多智能体环境的actor网络目标函数更新Actor-Critic的网络策略参数；若否，则执行：无人机i获取对应观测向量Oit，输出对应动作ait；无人机i判断此次编码选择的数据包是否选择全部属于源数据包集合Ai，若全部属于，则利用预先配置的随机线性网络编码对所述动作ait进行封装，根据封装结果对所述编码包集合Si进行更新得到新的编码包集合S′it，并基于所述动作ait更新所述无人机集群编码策略E；无人机i计算本轮奖励rit；无人机i读取对应的当前环境状态St和动作ait，得到新的状态组St，ait，rit，将新的状态组St，ait，rit存入经验回放缓冲区；基于改进后的多智能体环境的actor网络目标函数更新Actor-Critic的网络策略参数；步骤4，无人机集群中的每个无人机对预先构建的神经网络模型进行训练后，得到感知源数据包的无人机集群最佳编码策略。

全文数据：

权利要求：

百度查询： 郑州大学 基于MAPPO和RLNC的无人机集群协作式数据传输方法