(19)中华 人民共和国 国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111453132.6 (22)申请日 2021.11.30 (71)申请人 中国电力科 学研究院有限公司 地址 100192 北京市海淀区清河小营东路 15号 申请人 国网江苏省电力有限公司徐州供电 分公司　 国家电网有限公司 (72)发明人 闫冬　彭国政　陈盛　张伟　 曹亚非　姜华　代志成　 (74)专利代理 机构 北京中巡通大知识产权代理 有限公司 1 1703 代理人 李晓晓 (51)Int.Cl. G06F 30/27(2020.01)G06Q 50/06(2012.01) G06F 119/02(2020.01) (54)发明名称 一种配电网拓扑的控制方法、 系统、 设备及 存储介质 (57)摘要 本发明公开了一种配电网拓扑的控制方法、 系统、 设备及存储介质， 包括： 获取配电网拓 扑的 静态信息及动态信息； 将配电网拓扑的静态信息 及动态信息输入到利用AC强化学习算法训练后 的配电网拓扑控制模型中， 得配电网拓扑中开关 组合的控制信息； 根据配电网拓扑中开关组合的 控制信息对配电网拓扑进行控制， 完成配电网拓 扑的控制， 该方法、 系统、 设备及存储介质能够利 用深度强化学习对配电网拓扑进行控制。 权利要求书2页 说明书7页 附图3页 CN 114154416 A 2022.03.08 CN 114154416 A 1.一种配电网拓扑的控制方法， 其特 征在于， 包括： 获取配电网拓扑的静态信息及动态信息； 将配电网拓扑的静态信息及动态信息输入到利用AC强化学习算法训练后的配电网拓 扑控制模型中， 得到配电网拓扑中开关组合的控制信息； 根据配电网拓扑中开关组合的控制信 息对配电网拓扑进行控制， 完成配电网拓扑的控 制。 2.根据权利要求1所述的配电网拓扑的控制方法， 其特征在于， 所述将配电网拓扑的静 态信息输入到利用AC强化学习算法训练后的配电网拓扑控制模型中之前还 包括： 利用改进的指针网络构建配电网拓扑控制模型； 利用AC强化学习算法对配电网拓扑控制模型进行训练， 得训练后的配电网拓扑控制模 型。 3.根据权利要求2所述的配电网拓扑的控制方法， 其特征在于， 所述利用改进的指针网 络构建配电网拓扑控制模型的具体过程 为： 利用改进的指针网络， 基于配电网拓扑中各线路电流 限值、 配电网拓扑中各节点电压 限值及预设目标函数构建配电网拓扑控制模型。 4.根据权利要求2所述的配电网拓扑的控制方法， 其特征在于， 所述利用AC强化学习算 法对配电网拓扑控制模型进行训练的过程中的奖励函数为： 其中， c1为可靠性的目标评价权重， c2为快速性的目标评价权重， G ′为通过决策序列对 待控制配电网拓扑进行处理的结果， D为配电网内的负荷节点数目， γi为配电网内第i个负 荷节点的带电状态， Ω为决策元素序列， βj为表示开关状态变化的0 ‑1变量， 其中， 当开关状 态发生变化时， 则βj取为1， 否则， 则βj为0。 5.根据权利要求1所述的配电网拓扑的控制方法， 其特征在于， 第t时刻， 所述改进的指 针网络中的状态空间为： 其中， st为第t时刻 配电网拓扑的静态信息， dt为第t时刻配电网络拓扑的动 态信息， M为 配电网拓扑 内的可控开关数， sM为第M个可控开关的静态信息， dt,M第M个可控开关的动态信 息的静态元 素位置。 6.根据权利要求5所述的配电网拓扑的控制方法， 其特征在于， 第t时刻， 配电网拓扑的 动态信息dt为： 其中， m为动态信息的静态元素位置， xm为动态信息的静态元素的操作信息， G为配电网 络拓扑结构， * 为拓扑操作运算， γi为配电网 内第i个负荷节点的带电状态,Ωt为第t时刻的 决策元素序列， D为配电网内的负荷节点数目， γi(G)表示拓扑G内负荷节点的带电状态。权　利　要　求　书 1/2 页 2 CN 114154416 A 27.根据权利要求1所述的配电网拓扑的控制方法， 其特征在于， 在t时刻， 所述改进的指 针网络中掩码的计算逻辑 为： 根据t‑1时刻后掩码矩阵， 依次将所有非0的状态加入到决策序列中， 并判断所述约束 条件是否满足， 当不满足约束条件时， 则将对应编码的掩码值置为0， 否则， 则将t时刻选择 的状态编号掩码 置为0， 将t时刻选择状态的互斥状态掩码置为0， 再将所述对应编 码的掩码 值置为0的掩码值还原。 8.一种配电网拓扑的控制系统， 其特 征在于， 包括： 获取模块(1)， 用于获取配电网拓扑的静态信息及动态信息； 计算模块(2)， 用于将配电网拓扑的静态信息及动态信息输入到利用AC强化学习算法 训练后的配电网拓扑控制模型中， 得到配电网拓扑中开关组合的控制信息； 控制模块(3)， 用于根据配电网拓扑中开关组合的控制信息对配电网拓扑进行控制， 完 成配电网拓扑的控制。 9.一种计算机设备， 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器 上运行的计算机程序， 其特征在于， 所述处理器执行所述计算机程序时实现如权利要求 1至 7任一项所述配电网拓扑的控制方法的步骤。 10.一种计算机可读存储介质， 所述计算机可读存储介质存储有计算机程序， 其特征在 于， 所述计算机程序被处理器执行时实现如权利要求 1至7任一项 所述配电网拓扑的控制方 法的步骤。权　利　要　求　书 2/2 页 3 CN 114154416 A 3