买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网获悉广西大学申请的专利一种基于知识辅助深度强化学习的多能系统经济调度方法获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN115456475B 。

龙图腾网通过国家知识产权局官网在2026-01-27发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202211252375.8，技术领域涉及：G06Q10/0631；该发明授权一种基于知识辅助深度强化学习的多能系统经济调度方法是由刘辉;黄立冬;谢海敏;汪旎;马斯宇设计研发完成，并于2022-10-13向国家知识产权局提交的专利申请。

本一种基于知识辅助深度强化学习的多能系统经济调度方法在说明书摘要公布了：本发明公开了一种基于知识辅助深度强化学习的多能系统经济调度方法，本方法的具体步骤如下：首先，深度确定性策略梯度算法构建了一个智能体用于接收环境传递来的状态信息并探索对应的最优机组出力，该算法可以获得最优调度策略并且减轻维数灾难。其次，知识辅助强化学习算法作为保护器处于智能体与环境的中间层，保护器可以加快深度确定性策略梯度算法的收敛速度，同时保证智能体在探索试错过程中不会危害系统设备的安全。最后，在难以建立系统精确模型的情况下，基于知识辅助深度强化学习的多能系统经济调度方法可以有效地获得系统调度的最优经济性与收敛性。本发明可以提高系统的安全性，增强系统经济高效运行的能力。

本发明授权一种基于知识辅助深度强化学习的多能系统经济调度方法在权利要求书中公布了：1.一种基于知识辅助深度强化学习的多能系统经济调度方法，其特征在于，包括如下步骤： 1获取多能系统初始状态量并传递给智能体； 2智能体接收到状态量后通过自身策略获得对应的动作量，并在动作量上增加一个高斯噪声用于探索； 3保护器获取环境状态量与智能体所产生的动作量，根据专家知识判断动作量是否超出多能系统设备的安全工作区间，如果动作量超出系统安全工作区间，则对其进行校正，并把校正后的动作量传递给环境执行，同时反馈给智能体一个大于零的惩罚成本；如果动作量处于设备安全工作区间内，则直接将动作量传递给环境执行，并反馈给智能体一个等于零的惩罚成本； 4环境在接收到保护器传来的动作量后，执行动作得到系统的运行成本并获取下一时刻状态量，将运行成本与下一时刻状态量传递给智能体； 5循环步骤2、步骤3与步骤4，将每次得到的系统状态量、智能体动作量、惩罚成本、运行成本、系统下一时刻状态量存储在智能体的经验回放池中，智能体随机抽取经验回放池中的数据并依据深度确定性策略梯度算法更新自身策略； 所述智能体中包含四个神经网络，分别为行为网络、批判网络、行为目标网络、批判目标网络；行为网络与行为目标网络架构相同，批判网络与批判目标网络架构相同，四个网络都采用随机初始化权重的方式生成；所述行为网络以系统状态量为输入，并在网络输出上叠加一个高斯噪声获得一个连续的动作，行为网络模型如下： ， 式中为原始动作量叠加高斯噪声后产生的新动作量；为行为网络输出的原始动作量；为高斯噪声；为高斯噪声的方差；为衰减因子；为当前迭代次数； 所述行为网络产生的新动作量具体表示为： ， 式中为时刻电锅炉输入功率占额定功率的百分比；与为变量，表示蓄电池充电，表示蓄电池放电，表示蓄热罐充热，表示蓄热罐放热；为时刻蓄电池充放电量占蓄电池容量的百分比，充放电状态由决定；为时刻蓄热罐充放热量占蓄热罐容量的百分比，充放热状态由决定；智能体初始策略为随机策略，智能体的策略会随着迭代学习而更新； 所述步骤1多能系统的状态量为： ， 式中表示时刻系统状态向量；为系统所处的时刻；为时刻系统蓄电池所含能量占蓄电池额定容量的百分比；为时刻系统蓄热罐所含能量占蓄热罐额定容量的百分比；为时刻系统电负荷；为时刻系统热负荷；为时刻系统与电网交易单位电价，系统可以从电网购电补足自身电力缺额，也可以向电网售电获取收益；为时刻系统从天然气网购气单位价格；为时刻系统光伏出力；八个状态量中，与为系统内因状态量，由智能体所给出的动作决定，、、、、、为系统外因状态量，由环境中的智能电表读取； 所述步骤3的校正包括蓄电池充放电动作校正、蓄热罐充放热动作校正以及电锅炉输入功率校正，所述蓄电池充放电动作校正按下式进行： ， 式中为校正后蓄电池充放电量占蓄电池容量的百分比；为蓄电池充电效率；为蓄电池放电效率； 所述蓄热罐充放热动作校正按下式进行： ， 式中为校正后蓄热罐充放热量占蓄热罐容量的百分比；为蓄热罐充热效率；为蓄热罐放热效率； 所述电锅炉输入功率校正按下式进行： ， 式中为校正后电锅炉输入功率占电锅炉额定容量的百分比；为蓄热罐额定容量；为电锅炉额定容量；为电锅炉能量转换效率。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人广西大学，其通讯地址为：530004 广西壮族自治区南宁市西乡塘区大学东路100号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。

以上内容由龙图腾AI智能生成。