买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉国网江苏省电力有限公司营销服务中心申请的专利一种异构网络算力控制的近端策略优化方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119766655B 。

龙图腾网通过国家知识产权局官网在2025-09-30发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411825088.0，技术领域涉及：H04L41/0894；该发明授权一种异构网络算力控制的近端策略优化方法及系统是由诸葛吴为;周红勇;陈新崛;邹云峰;张延展;程璐;孙雨婷;周家亿;陈继宁;邱丽羚;王贺;朱妍设计研发完成，并于2024-12-12向国家知识产权局提交的专利申请。

本一种异构网络算力控制的近端策略优化方法及系统在说明书摘要公布了：一种异构网络算力控制的近端策略优化方法及系统，包括：基于异构网络算力控制场景，设置行为网络和评价网络的初始参数，构建存储训练数据的经验缓冲区，加载异构网络终端的轨迹数据，设置每个异构网络终端的计算参数，通过线性衰减规则调整裁剪值；由行为网络根据输入的当前状态数据生成策略，输出选择最大概率的动作作为算力分配方案，并以最大化累积奖励为目标，构建行为网络的目标函数；利用评价网络对分配方案中执行的动作进行价值评估，以最小化状态值函数的预测误差为目标构建评价网络的目标函数；根据算力分配方案在异构网络终端执行方案，并结合方案完成后的能耗、执行时间和方案质量计算奖励，将训练数据存储到经验缓冲区中。

本发明授权一种异构网络算力控制的近端策略优化方法及系统在权利要求书中公布了：1.一种异构网络算力控制的近端策略优化方法，异构网络包括行为网络、评价网络、经验缓冲区以及终端；行为网络，用于生成动作概率分布并输出算力分配方案；评价网络，用于根据算力分配方案中动作对应的状态数据，评估算力分配方案；经验缓冲区，用于存储状态、动作和奖励数据；异构网络终端，用于执行算力分配方案并记录执行算力分配方案后的运行状态；运行状态包括执行算力分配方案过程中的资源使用量、能耗及完成状态信息；其特征在于，包括以下步骤： 行为网络输入异构网络终端的轨迹数据，包括CPU频率范围、能耗曲线的变化数据和最大训练时间步长； 根据最大训练时间步长和当前训练时间步长，采用线性衰减方法，确定裁剪范围； 以最大化累积奖励为行为网络的目标函数，以裁剪范围为行为网络的目标函数的约束条件，行为网络根据输入的状态数据而输出新策略下的动作概率分布； 选择新策略下概率最大值对应的动作为算力分配方案；评价网络以算力分配方案中的动作对应的状态的预测误差最小为目标函数，对算力分配方案对应的完成状态进行价值评估； 异构网络终端执行算力分配方案的过程中获取资源使用量、能耗及完成状态信息；行为网络根据资源使用量、能耗、完成状态信息、以及完成状态的价值评估结果，确定算力分配方案的奖励； 将算力分配方案及算力分配方案的奖励存储至经验缓冲区中，用于更新行为网络的策略参数和评价网络的状态值函数参数，以生成新策略并评估算力分配方案的状态价值。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人国网江苏省电力有限公司营销服务中心，其通讯地址为：210019 江苏省南京市建邺区奥体大街9号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。