MADRL

基于图表的MADRL用于无线网络控制系统中的访问控制和资源分配

摘要 - 无线网络控制系统（WNC）通过实现传感器，决策中心和执行器之间的无线协调来彻底改变工业自动化。但是，WNC中效率低下的访问控制和资源分配是限制闭环性能和控制稳定性的两个关键因素，尤其是在光谱和能源资源受到限制时。在本文中，我们首先分析了维持WNC的控制稳定性的最佳调度条件，然后制定一个长期优化问题，该问题可以共同优化边缘设备的访问策略，并在Edge Server中授予策略和资源分配。我们采用Lyapunov优化将长期优化问题分解为一系列独立的子问题，并提出了一个基于基于多代理的多代理深度强化学习算法的异质注意图，该学习算法可以共同优化访问和资源分配策略。通过利用注意力机制将图形表示从异质代理投射到统一的空间中，我们提出的算法促进了异质剂之间的协调，从而增强了整体系统性能。仿真结果表明，我们提出的框架的表现优于几个基准，从而验证了其有效性。