摘要:本文提出了一种分层深度强化学习 (DRL) 方法,用于智能家电和分布式能源 (DER)(包括储能系统 (ESS) 和电动汽车 (EV))的能源消耗调度。与基于离散动作空间的 Q 学习算法相比,该方法的新颖之处在于,使用基于参与者-评论家的 DRL 方法在连续动作空间中调度家用电器和 DER 的能源消耗。为此,提出了一个两级 DRL 框架,其中根据消费者偏好的家电调度和舒适度在第一级调度家用电器,而使用第一级的最优解以及消费者环境特征在第二级计算 ESS 和 EV 的充电和放电计划。在分时定价下,在一个有空调、洗衣机、屋顶太阳能光伏系统、ESS 和 EV 的单个家庭中进行了模拟研究。不同天气条件、工作日/周末和电动汽车驾驶模式下的数值示例证实了所提出方法在电力总成本、储能系统和电动汽车的能量状态以及消费者偏好方面的有效性。
主要关键词