图 1:大规模可再生能源机会的市场增长潜力矩阵 3 图 2:南非 REIPPPP 的启动和时间表 12 图 3:迄今为止南非实现的主要大规模可再生能源运动 18 图 4:独立电力生产商办公室 (IPPO) 的治理结构 23 图 5:IPPO 采购流程 24 图 6:对 REIPPPP 进行私人投资的国家 27 图 7:政策调整计划 IRP 2019 31 图 8:可再生能源价值链 35 图 9:项目生命周期不同阶段所涉及的典型公司类型 36 图 10:指导南非经济增长轨迹的政策 39 图 11:与 REIPPPP 相关的政策生态系统 40 图 12:所有投标窗口的太阳能光伏和陆上风电的电价下降和授予容量 43 图 13:Eskom 供电区电网容量在 BW 前五个项目的基础上Eskom 的 GGCA 2023 报告第一阶段于 2021 年 6 月发布 58
摘要本文展示了将自主网络防御应用于工业控制系统上的潜力,并提供了一个基线环境,以进一步探索多代理强化学习(MARL)对此问题领域的应用。它引入了通用集成平台管理系统(IPMS)的模拟环境,IPMSRL,并探讨了MARL对基于通用海事的IPMS Operational Technology(OT)的自动网络防御决策的使用。网络防御行动不如企业对IT的成熟。 这是由于OT基础架构的相对“脆性”性质源于使用传统系统,设计时间工程假设以及缺乏全面的现代安全控制。 ,由于不断增加网络攻击的复杂性以及传统以IT中心的网络防御解决方案的局限性,在网络景观中有许多障碍。 传统的IT控件很少在OT基础架构上部署,并且在它们的位置,某些威胁尚未完全解决。 在我们的实验中,多代理近端策略优化(MAPPO)的共享评论家实施优于独立近端策略优化(IPPO)。 Mappo达到了800K时间段之后的最佳政策(情节结果平均值),而IPPO只能达到一百万个时间段的情节结果平均值为0.966。 超参数调整大大改善了训练性能。网络防御行动不如企业对IT的成熟。这是由于OT基础架构的相对“脆性”性质源于使用传统系统,设计时间工程假设以及缺乏全面的现代安全控制。,由于不断增加网络攻击的复杂性以及传统以IT中心的网络防御解决方案的局限性,在网络景观中有许多障碍。传统的IT控件很少在OT基础架构上部署,并且在它们的位置,某些威胁尚未完全解决。在我们的实验中,多代理近端策略优化(MAPPO)的共享评论家实施优于独立近端策略优化(IPPO)。Mappo达到了800K时间段之后的最佳政策(情节结果平均值),而IPPO只能达到一百万个时间段的情节结果平均值为0.966。超参数调整大大改善了训练性能。在一百万个时间段中,调整后的超参数达到了最佳策略,而默认的超参数只能偶尔赢得胜利,大多数模拟导致抽签。我们测试了现实世界中的约束,攻击检测警报成功,并发现当警报成功概率降低到0.75或0.9时,MARL Defenders仍然能够分别在97.5%或99.5%的情节中获胜。
AG 审计长 AMEU 市政电力企业协会 CoJ 约翰内斯堡市 COUE 未服务能源成本 CSIR 科学与工业研究理事会 CSP 聚光太阳能 DBSA 南部非洲开发银行 DMRE 矿产资源和能源部 DSM 需求侧管理 EAF 能源可用性系数 EGIP 嵌入式发电投资计划 ERA 2006 年《电力监管法》第 4 号 GHG 温室气体 GW 吉瓦 IEP 综合能源计划 IPP 独立电力生产商 IPPO 独立电力生产商办公室 IRP 综合资源计划 kWh 千瓦时 MFMA 2003 年《市政财政管理法》第 56 号 MPPG 市政电力购买或发电 MSA 2000 年《市政系统法》第 32 号 MW 兆瓦 NDP 国家发展计划 NERSA 南非国家能源监管机构 O&M 运营和维护 PPA 电力购买协议 PV 光伏 PPP 公私合作伙伴关系
自主代理人与人的互动越来越集中于适应其不断变化的偏好,以改善现实世界任务中的援助。有效的代理必须学会准确地推断出通常隐藏的人类目标,才能很好地进行协作。但是,现有的多代理增强学习(MARL)环境缺乏严格评估这些代理人学习能力所需的必要属性。为此,我们介绍了Color G Rid,这是一种具有可定制的非平稳性,不对称性和奖励结构的新型MARL环境。我们调查了独立的近端政策选择(IPPO),一种最先进的(SOTA)MARL算法,在C olor G ride和通过广泛的消融中找到,尤其是在“人类和“人类较低”的“领导者”代理之间,尤其是在“领导者”中同时进行非平稳和不对称目标的助理代理人,由color color c olor is i i i i i i i i i i i i i i i i i i Is i i是。为了支持未来的MARL算法,我们在https://github.com/andreyrisukhin/colorgrid上发布了环境代码,模型检查点和轨迹可视化。
• 2011 年至 2022 年,南非政府通过其 2010-2030 年综合资源计划 (IRP),在 IPPO、国家公用事业公司 Eskom、DMRE 的管理下,成功启动并完成了 4 个竞争性 REIPPPP 招标窗口,允许私营部门和独立电力生产商 (IPP) 投资南非可再生能源市场。§ 不包括 BW5,共提交了 302 份投标,其中约 30%(92 个)被选中(6.4GW)。在这 92 个项目中,近 70%(4.41GW)已经投入运营§ 符合条件的技术包括陆上风电、太阳能光伏 (PV)、聚光太阳能发电 (CSP)、小水电、生物质能、沼气或垃圾填埋气项目。• 风能和太阳能光伏项目再次占大多数,为 5.65 GW 或 89%。虽然 86% 的太阳能光伏项目位于北开普省,14% 分布在其他省份,但风电项目主要分布在东开普省和北开普省。 • 在总投资(205 亿美元)中,约 80% 是在商业银行、基金和发展金融机构 (DFI) 之间筹集的,这表明南非的金融业非常强大,约 20% 的 FDI
总之,机会比比皆是。不过,迄今为止,南非在可再生能源和存储领域建设工业能力的尝试取得了好坏参半的结果。在国家主导的可再生能源独立电力生产商采购计划 (REIPPPP) (2011-2015) 启动期间建立的大部分工业能力由于缺乏需求而处于休眠状态或丧失 (GreenCape, 2021)。图 3 中可以清楚地说明这一点,风力涡轮机的进口在 2017-2018 年和 2021-2022 年陷入停滞,就像价值链的其他部分一样。因此,除了工厂平衡(例如土木工程、电气)和少数例外(例如风力涡轮机塔架)外,该行业主要依赖进口。在 REIPPPP 的投标窗口 (BW) 5 中,本地内容承诺占建设项目总价值的 44%,占运营项目总价值的 41% (IPPO, 2022),再次侧重于工厂的平衡和一些本地化投入。与此同时,从 2014 年到 2023 年,南非的太阳能电池板、逆变器、锂离子电池和风力涡轮机进口总额分别为 430 亿兰特、650 亿兰特、550 亿兰特和 290 亿兰特,其中 2023 年为 180 亿兰特(电池板)、200 亿兰特(逆变器)、320 亿兰特(锂离子电池)和 40 亿兰特(涡轮机)。1
0D 零维 1D 一维 2D 二维 3D 三维 AFM 原子力显微镜 AI 人工智能 AM 增材制造 AMO DOE 先进制造办公室 aPPO 无定形聚环氧丙烷 BES DOE 基础能源科学办公室 BRN 基础研究需求 CAMERA 能源研究应用高级数学中心 CT 计算机断层扫描 DFT 密度泛函理论 DOE 能源部 DPD 耗散粒子动力学 EDS 能量色散 x 射线光谱 EJ 艾焦耳 FEL 自由电子激光器 fs 飞秒 GHG 温室气体 HEDM 高能衍射显微镜 HPC 高性能计算 HTE 高通量实验 iPPO 环氧丙烷等规聚合 IR 红外 LED 发光二极管 Li 锂 MAS 魔角旋转 ML 机器学习 MOF 金属有机骨架 MS 质谱或微秒 NIST 美国国家标准与技术研究所 NOx 氮氧化物 NSLS 美国国家同步加速器光源 PCAST 总统科学技术顾问委员会 PDF 对分布函数 PRD 重点研究方向 ps 皮秒 R&D 研究与开发 s 秒 SAXS 小角度 x 射线散射 SEM 扫描电子显微镜/显微镜 SLM 选择性激光熔化 ssNMR 固态核磁共振 TEM 透射电子显微镜/显微镜 YAG 钇铝石榴石
Adam Treki 高级业务发展经理 Scatec Solar 南非 南非 Adila Marengo 高级 IPP 项目开发经理 Eskom 南非 Adre Taillard 项目开发商 HDF Energy 南非 Adrien Ruau 非洲采购主管 ENGIE 南非 南非 Ahmad Syahrani Sulaiman 高级投资组合经理 三井物产阿联酋 Akash Prakash 高级经理中央采购机构 Eskom 南非 Akhilesh Goyal 副主任 Synergy Consulting 基础设施和财务咨询 印度 Alan Kapota 服务经理 Green Future 南非 Albert van der Walt 项目顾问 Hyosung SA 南非 Alex Memela 副负责人 Nedbank 南非 Alexander Marshall 集团董事 Clarke Energy 美国 美国 Ali Mnisi Transactor IDC 南非 Alicia Britz 合同经理 IPP 项目南非 Alistair Potgieter 技术顾问 TNEI 南非 Allen Seager 业务发展经理 DEHN Africa 南非 Alwyn Naidoo 基础设施和资本项目南非负责人 Deloitte 南非 Amaan Sayed 首席执行官Aamal RSA Amanda Ngwenya 顾问 丹麦能源署 丹麦 Amber Bolleurs Transactor RMB 南非 Amit Goel 副主任 Synergy Consulting 印度 Ammaara Ebrahim 助理 Nedbank 南非 Amy Hill 项目经理 Atlantic Renewable Energy Partners 南非 Anastasia Posokhov 高级法律顾问:法律与合规 AMEA Power SA 南非 Andre Snyders 行业分析师 标准银行 南非 Andre Adriaanse 南部非洲发展共同体的储能经理 晶科能源 南非 Andrea Lawrenson 运维项目开发商 Scatec 南非 Andrew Shiaka 主任 Meridiam 南非 Andrew Johnson Mr Osmotic Engineering Group 南非 Andy Zhao 全球业务经理 广州智光电气股份有限公司 中国/广州 Anne Petrarque 投资经理 Enel Italia Annelize van der Merwe 主任:绿色经济 贸易、工业和竞争部 南非 ANTHONY DE GRAAF 首席财务官 主任 南非 Ashleigh Purdon 分析师 Moore 南非 Ashley Singh 业务发展主管 ACWA Power 南非 Ashley Singh 业务发展主管ACWA Power 南非 Ashraf Jaunbocus 业务发展总监 Infinity Power 阿联酋 Avania Moosa 高级银行家 Absa 南非 Badr Bentassil 业务发展经理 Infinity Power 阿联酋银行家 Sebothoma 主要交易发起人 南非发展银行 南非 Bashi Makhafola 运营经理 Zammane 商业企业 南非 Bavesh Kooverji 高级顾问 Infravue 南非 Baxolile Zwane 首席执行官 eMangweni Business Solutions (Pty) Ltd 南非 Bayabonga Myeni 毕业生培训生 独立电力生产商 (IPP) 办公室 南非 benjamin shunilal 经济发展 IPPO 南非 Bernaise Poole 项目管理办公室 A-Hub Energy 南非 Bertie Strydom 签约交易员 IDC 南非