基于深度强化学习的牵引供电系统优化配置

《Applied System Innovation》:Optimal Configuration of Traction Power Supply Systems Based on Deep Reinforcement Learning

【字体: 大 中 小 】 时间:2026年08月28日 来源:Applied System Innovation 3.4

编辑推荐:

  摘要翻译: 为解决柔性牵引供电系统中供电拓扑、模块选型、容量配置与N-2校核之间的耦合问题,提出了一种基于深度强化学习引导的分支定界方法,用于设备选址与定容。Actor网络选择优先分支动作,Critic网络对搜索节点进行排序;精确的基于界的剪枝与N-2验证仍由

  
摘要翻译:
为解决柔性牵引供电系统中供电拓扑、模块选型、容量配置与N-2校核之间的耦合问题,提出了一种基于深度强化学习引导的分支定界方法,用于设备选址与定容。Actor网络选择优先分支动作,Critic网络对搜索节点进行排序;精确的基于界的剪枝与N-2验证仍由底层分支定界过程控制。可行性保持结果表明,所报告的任意解均满足规定的N-2容量支撑条件。算例研究表明,所提方法通过建立中压直流贯通段和柔性互联通道,在典型N-2故障下将功率缺额降至零。与参考案例相比,主体配置成本增加12.5%,表明所提方法能够以配置成本适度增加为代价,提升系统在严重故障下的支撑能力。
论文解读:基于深度强化学习引导分支定界的柔性牵引供电系统优化配置研究

一、研究背景与问题

城市轨道交通具有客运量大、运行频繁、负荷波动显著等特点。传统分散式牵引供电系统中,电能通常从外部电网引入中压配电网,经牵引变电站变换后通过直流接触网供给列车。然而,该架构拓扑相对固定、功率流向以单向为主、供电区间之间的互济能力有限。随着负荷需求增长以及与城市电网耦合日益紧密,牵引供电系统被期望不仅提供牵引供电,还能实现灵活功率转供、电网互动及可靠运行。大功率变换器技术的进步催生了柔性牵引供电架构,柔性互联变换器可在外部电源、中压互联网络与牵引网络之间建立可控功率转供路径,但其位置、类型和容量显著影响投资成本、可靠性与运行灵活性。

现有研究主要聚焦于站点级设备的选址定容,对涉及多种柔性模块类型的供电架构生成关注不足。在本文所考虑的系统中,决策变量包括设备位置、模块类型与容量、候选接线方案以及中压互联网络的交直流形态,构成高维混合整数优化问题。可靠性评估方面,传统规划多基于N-1准则,而一个外部电源点通常含有两回进线,上游电网、母线或接入开关故障可能导致两回进线同时失电。因此,本文采用N-2容量支撑能力作为关键规划约束,以评估外部电源和关键设备多重故障下的跨区负荷转供能力。该规划问题涉及供电架构生成、模块选型、容量配置与故障校核的耦合,直接优化困难,需要将N-2可靠性验证嵌入优化过程而非仅作为后处理环节。

二、研究内容与主要方法

针对上述问题,研究人员提出了一种基于深度强化学习引导的分支定界方法,用于柔性牵引供电系统的设备选址与定容。该框架以分支定界(B&B)为底层精确搜索机制,将规划问题转化为智能体与搜索环境之间的交互过程。研究采用Actor网络选择优先分支变量与方向,Critic网络估计搜索节点的长期价值以排序未探索节点;永久剪枝仍由精确的基于不可行性和界的条件控制,N-2可行性验证在接受候选解为当前最优解之前执行。

具体而言,所提方法包含四个功能模块:规划建模与初始化模块、强化学习引导分支模块、价值评估与安全剪枝模块、可行性验证与解输出模块。研究方法的核心创新在于将学习组件仅作为搜索引导机制,而非替代优化器:学习组件不直接生成最终设备配置,不松弛任何规划约束,也不替代数学可行性校验。可行性保持定理证明了在所有候选更新过程中,只要整数可行性和N-2条件被强制执行,每个报告的解均属于由混合整数规划约束和规定故障集定义的可行域。

在算法设计中,当前节点状态由静态物理特征、全局解特征和局部变量特征三组特征构成。Actor网络输出分支动作概率分布,其交叉熵损失用于训练;Critic网络估计状态价值,采用均方值损失训练。训练数据来自代表性柔性牵引供电规划实例生成的分支定界搜索轨迹,覆盖不同设备组合、交直流形态、候选互联结构、负荷分布和N-2故障条件。

三、研究结果

案例研究基于北京某城市轨道交通线路构建测试系统,包含9座车站和3个区间所,共12个牵引负荷点,线路总长约15.6千米。外部电源侧考虑7个110千伏并网点,对应14回进线。候选设备库包含5种模块化设备类型:A型为主变压器模块(连接110千伏交流与10千伏交流)、B型为传统整流模块(连接10千伏交流与1500伏直流)、C型为低压双向变换模块(连接10千伏交流与1500伏直流)、D型为中压双向变换模块(连接10千伏交流与±10千伏直流)、E型为直流变压器模块(连接±10千伏直流与1500伏直流)。

对比案例设置方面,基准案例采用文献[8]所述方法,主要优化牵引变电站安装位置与容量,不涉及多层供电拓扑生成及中压网络交直流混合结构;所提方法案例则包含完整的架构生成过程。选址定容结果显示,基准案例连接全部7个外部电源点,采用全交流分区供电架构,仅在TSS4-TSS5和TSS8-TSS9区间安装四端口柔性互联设备,区间功率互济能力有限。所提方法则舍弃了接入成本较高的外部电源点ES4,建立覆盖TSS6-TSS8的10千伏直流互联段,在TSS5-TSS6和TSS8-TSS9之间安装D型模块,使ES3和ES5可从直流段两端提供功率支撑;其余交流区段在TSS2-TSS3、TSS4-TSS5、TSS9-TSS10和TSS11-TSS12之间安装四端口C型模块,形成连续互济路径。

成本对比结果表明,所提方法总配置成本为2.7061亿元,比基准案例的2.4045亿元高出3016万元,增幅约12.5%。其中外部电源接入成本因舍弃ES4而降低2704万元,A型与B型模块及牵引侧C型模块投资也有所下降;新增成本主要来自四端口C型、D型和E型柔性设备。N-2校核结果显示,在典型双回进线同时故障场景下,基准案例仍存在0.73至8.62兆瓦的功率缺额;所提方法通过交流区段柔性互联、中压直流贯通段及两侧D型模块的双向备用支撑,将所有典型N-2故障场景下的功率缺额降至零。

四、结论与意义

研究结论表明,所提出的可行性保持搜索结构能够在不改变报告解可行性要求的前提下优化搜索顺序。在北京规划案例中,该方法排除了高成本外部电源点ES4,建立了中压直流贯通段,并在交流区段配置了柔性互联模块。与参考案例相比,配置投资增加12.5%,但在典型N-2场景下将功率缺额从0.73至8.62兆瓦降至零。这一结果展示了在容量支撑模型假设下,额外柔性互联投资与故障支撑能力提升之间的规划权衡。从工程规划角度看,该额外投资可视为建立冗余可控功率转供路径的成本,这些路径是严重故障下维持牵引负荷供电所必需的。

该框架可通过更新网络、设备、成本及故障集输入,应用于其他城市轨道交通规划问题;对于规模或拓扑差异显著的系统,需使用新系统生成的搜索轨迹对Actor-Critic网络进行再训练或微调。可迁移性主张仅限于能提供有效分支定界界值和确定性可行性评估器的规划问题。未来工作可考虑时变负荷、电压电流约束、变换器控制动态、保护配合及病态潮流条件等因素。该研究发表于《Applied System Innovation》期刊。
相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号