买专利卖专利找龙图腾，真高效！ 查专利查商标用IPTOP,全免费！专利年费监控用IP管家,真方便！

龙图腾网恭喜国网山东省电力公司经济技术研究院;国家电网有限公司申请的专利基于深度强化学习的有源配电网集群动态划分方法及系统获国家发明授权专利权，本发明授权专利权由国家知识产权局授予，授权公告号为：CN119154412B 。

龙图腾网通过国家知识产权局官网在2025-05-23发布的发明授权授权公告中获悉：该发明授权的专利申请号/专利号为：202411666509.X，技术领域涉及：H02J3/46；该发明授权基于深度强化学习的有源配电网集群动态划分方法及系统是由杨慎全;刘淑莉;郑志杰;梁荣;李昭;杨波;崔灿;刘钊;杨扬;綦陆杰;邓少治;王延朔;赵韧;张雯;李昊;李凯;张博颐;王耀雷设计研发完成，并于2024-11-21向国家知识产权局提交的专利申请。

本基于深度强化学习的有源配电网集群动态划分方法及系统在说明书摘要公布了：基于深度强化学习的有源配电网集群动态划分方法及系统，方法包括以下步骤：步骤1：构建面向配电网集群动态划分的CMDP模型；步骤2：利用拉格朗日松弛法将步骤1中构建的CMDP模型转化为无约束问题，并构建基于AC‑DRL的求解框架，用于求解CMDP模型；步骤3：对步骤2构建的基于AC‑DRL的求解框架进行训练，得到可部署的CMDP模型；步骤4：将步骤3获得的可部署CMDP模型，部署到配电网调度云平台中，根据配电网的实时观测状态提供集群划分结果。相比于传统的集群划分方法，本发明在实际应用时，大大降低了计算复杂度，即使对于大型系统规模也可以做出极快的决策，使其更有能力实时响应配电网状态的波动。

本发明授权基于深度强化学习的有源配电网集群动态划分方法及系统在权利要求书中公布了：1.一种基于深度强化学习的有源配电网集群动态划分方法，其特征在于，包括以下步骤：步骤1：构建面向配电网集群动态划分的CMDP模型，以如下公式表示： 1式中：为折扣因子，为成本限值，表示最优策略；为时刻包含配电网状态信息的智能体状态空间；为时刻作为配电网动态集群动态划分结果的智能体动作空间；为智能体的奖励函数；为智能体的成本函数；在时刻，智能体的成本函数以如下公式还表示： 2式中：表示集群内所存在的孤岛个数；步骤2：利用拉格朗日松弛法将步骤1中构建的CMDP模型转化为无约束问题，并构建基于AC-DRL的求解框架，用于求解CMDP模型；使用Gumbel-Softmax函数来生成动作的采样概率，并据此选择相应的离散动作，以如下公式表示： 3式中：π为策略，这里被形式化为一个神经网络，它的输入是状态，输出为每个节点的分区编号；是由产生的Gumbel噪声，该噪声被用来在采样过程中引入随机性；为节点属于哪个集群的概率向量；为0到1上均匀分布的H个随机变量组成的向量；为一个超参数；为softmax函数；在训练动作网络和评价网络的过程中，引入双Q裁剪学习技术，基于双Q裁剪学习的策略损失函数以如下公式表示： 4式中：表示智能体根据动作网络在状态所采样的动作，φ为离散策略网络的神经网络参数；和分别为奖励价值函数和成本价值函数；步骤3：对步骤2构建的基于AC-DRL的求解框架进行训练，训练完成后，固定动作网络的参数，得到可部署的CMDP模型；步骤4：将步骤3获得的可部署CMDP模型，部署到配电网调度云平台中，仅根据配电网的实时观测状态提供集群划分结果。

如需购买、转让、实施、许可或投资类似专利技术，可联系本专利的申请人或专利权人国网山东省电力公司经济技术研究院;国家电网有限公司，其通讯地址为：250021 山东省济南市槐荫区纬十路111号；或者联系龙图腾网官方客服，联系龙图腾网可拨打电话0551-65771310或微信搜索“龙图腾网”。