买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜浙江理工大学申请的专利基于异构智能体近端策略优化的动态频谱接入方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119071791B 。

龙图腾网通过国家知识产权局官网在2025-04-01发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411526110.1，技术领域涉及：H04W16/10；该发明授权基于异构智能体近端策略优化的动态频谱接入方法是由徐伟强;王启凤设计研发完成，并于2024-10-30向国家知识产权局提交的专利申请。

本基于异构智能体近端策略优化的动态频谱接入方法在说明书摘要公布了：本发明公开了一种基于异构智能体近端策略优化的动态频谱接入方法，属于认知无线网络通信技术领域，包括S1、针对具备异构性状态空间和动作空间的动态频谱接入环境建立计算模型；S2、根据S1的计算模型生成动态频谱接入优化策略；S3、动态频谱接入环境各用户状态空间、各认知用户通过状态感知模块感知频谱环境，并引入奖励机制；S4、基于HAPPO构建自适应动态频谱接入智能体；智能体与环境交互进行训练，获得动态频谱接入策略；S5、根据S4获得的参数化动态频谱接入策略进行动态频谱接入。本发明采用上述一种基于异构智能体近端策略优化的动态频谱接入方法，在环境异质性情况下使动态频谱接入中信道传输速率和利用率达到最佳状态，减少用户间的干扰。

本发明授权基于异构智能体近端策略优化的动态频谱接入方法在权利要求书中公布了：1.一种基于异构智能体近端策略优化的动态频谱接入方法，其特征在于，包括以下步骤：S1、针对具备异构性状态空间和动作空间的动态频谱接入环境建立计算模型，并初始化参数，包括次级用户数量N、各次级用户感知信道数G、整个网络系统信道数量L、各次用户感知长度以及带宽要求，然后构建频谱环境；S2、根据S1的计算模型生成动态频谱接入优化策略；S3、动态频谱接入环境各用户状态空间、各认知用户通过状态感知模块感知频谱环境，并引入奖励机制；S4、基于异构智能体近端策略优化构建自适应动态频谱接入智能体与聚合智能体，创建策略网络、价值网络以及各自对应目标网络；智能体与环境交互进行训练，环境进入新的状态反馈奖励给智能体，获得可继承的参数化动态频谱接入策略，具体为：步骤一、将每个认知用户视为异构智能体，然后初始化策略网络和全局价值网络，同时初始化经验回放池；步骤二、通过训练学习潜在的更优策略，获得一组策略，根据动作策略结合当前状态获得动作向量，动作中包括聚合频段的选择以及聚合长度的选择；执行动作获得当前时刻奖励和下一时刻状态向量，将保存入，从经验回放池中随机抽样，获得小批量样本；步骤三、使用GAE函数计算基于全局V值网络的优势函数，绘制得到代理的随机排列；步骤四、实验中令，对于各个代理从，通过以下公式更新网络参数： ；其中，表示第个智能体；表示batchsize，表示每个批次的长度，表示状态和的联合优势函数，表示第个智能体，表示当前策略，表示更新前的策略，表示给定，表示当前观测的情况下采取动作的概率；并通过以下公式更新V值网络： ；步骤五、重复步骤二至步骤四进行训练直到训练结束；S5、根据S4获得的参数化动态频谱接入策略进行动态频谱接入。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人浙江理工大学，其通讯地址为：310018 浙江省杭州市钱塘区下沙高教园区2号大街928号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。