摘要:针对无人战斗机空战中的机动决策问题,本文提出了一种基于深度强化学习的无人战斗机自主机动决策方法。首先,建立敌我双方无人战斗机飞行机动模型及机动库。然后,考虑到无人战斗机俯仰角不同时各动作不同的状态转换效果,将俯仰角等10个状态变量作为状态空间。结合空战态势威胁评估指数模型,设计内部奖励与稀疏奖励相结合的两层奖励机制作为强化学习的评估依据。然后,根据异步优势演员-评论家(A3C)算法,构建全连接层的神经网络模型。通过多线程的方式,UCAV与环境不断交互学习,对模型进行训练,逐步学习到最优的空战机动对抗策略,并指导UCAV进行行动选择。该算法通过多线程异步学习,降低了样本间的相关性。最后,在三种不同的空战场景中验证了该方法的有效性和可行性。
空战司令部 (ACC) 依靠空战机动仪表 (ACMI) 系统进行空对空作战训练和大规模部队部署飞行汇报。尽管这些系统可以非常有效地增强训练效果,但它们非常昂贵,并且通常需要在受限空域范围内飞行。这些因素阻碍了全舰队每天实施 ACMI 训练。基本的 ACMI 系统确定飞机位置和性能数据,并将数据传输到地面监测站进行记录、显示和汇报。早期的喷气式战斗机需要特殊的外部组件或“吊舱”来计算数据并将其传输到定制的计算机化汇报设施。现代飞机不再有这种限制,而且低成本的个人计算机现在提供的计算和图形显示功能足以进行 ACMI 汇报。当前的航空电子系统计算所有必要的数据,并在飞机航空电子系统总线上报告所需的参数。监控和记录这些机载数据将减少对特殊范围的要求,消除吊舱要求,并允许在战斗机中队通常可用的常规计算机设备上进行汇报和演示。内部数据还提供吊舱系统无法提供的航空电子参数。这些数据代表了飞行汇报的巨大未开发资源。内部系统提供的最大潜在贡献可能涉及战斗任务汇报能力。由于外部吊舱占用武器站,机组人员极不可能将这些组件带入战斗。内部组件是唯一可以为战斗任务汇报提供 ACMI 功能的替代方案。此外,内部组件保留了飞机的空气动力学和雷达信号特征,这是隐形飞机使用必不可少的功能。这种新的 ACMI 概念将减少对外部吊舱和其他支持设备的需求,并为每个任务提供基本的 ACMI 功能,与当前和计划中的基于吊舱的实施相比,可能节省大量成本。提议的替代方案还可以作为大型部队训练演习的重要补充,因为这些任务可能会继续依赖外部吊舱。在日常任务中提供基本的 ACMI 功能与偶尔的全面演习相结合时可提供显着的协同效应。ACC 目前正在开发新的 ACMI 吊舱和先进的训练系统。该内部解决方案提案以大型演习所需的独特功能换取便利性、易用性和基本 ACMI 功能的日常可用性,同时又不降低实战训练的价值。正在考虑的系统称为联合战术作战训练系统 (JTCTS),它将全球定位系统技术与 ACMI 设备相结合,并提供广泛的新功能。提议的功能包括电子战训练、“无投掷”弹药投掷训练以及将模拟器和虚拟训练系统与实弹任务连接起来的能力。对于此应用,基于吊舱的系统可能是近期的最佳解决方案。但是,可以为所有现代飞机提供基本的 ACMI 功能
摘要:随着近年来无人机性能和智能化的提升,提高自主空战能力对无人机尤为重要。针对如何提高无人机自主空战机动决策能力,使其接近人工操控的问题,提出一种基于模拟操作指令与最终奖励值深度确定性策略梯度(FRV-DDPG)算法相结合的自主空战机动决策方法。首先,基于空战过程、无人机运动、导弹运动,建立六自由度(6-DOF)模型。其次设计了一种基于粒子群优化径向基函数(PSO-RBF)的预测方法来模拟敌机的作战指令,使得训练过程更加真实;然后提出一种改进的DDPG策略,将最终的奖励值按一定比例的时间返回到上一次的奖励值进行离线训练,可以提高算法的收敛速度。最后通过搭建仿真环境验证了算法的有效性。仿真结果表明,该算法可以提高无人机自主空战机动决策能力。
模拟到数字 反装甲先进技术演示达到可用性 美国科学促进会 先进两栖攻击车 先进机载拦截器模拟器 ATM 适应层 大气气溶胶和光学数据库 1 - 行动后评估 2 - 行动后报告 行动后评估系统 先进自动化系统 陆军自动化安全计划 空对空系统性能评估模型 陆军先进技术演示 大气、生物和化学模拟 ALSP 广播模拟器 装甲断点模型 先进战斗模拟 模拟备用空中行动路线评估模型 先进计算机辅助设计 陆军计算机辅助采购与后勤支援 宙斯盾计算机中心 异步通信设备接口 陆军通信电子司令部 (现为 CECOM) 1 - 先进战役效能模型 2 - 空战评估模型 空战环境测试与评估设施 AWSIM CTAPS 接口 先进计算与信息科学理事会 ALSP 通用模块 空战机动仪表 空战机动模拟器
缩写 ACM ................................................................................................................................空战机动 ADIZ.......................................................................................................................... 防空识别区 AICUZ ..............................................................................................................空中设施兼容使用区 AFB ........................................................................................................................................空军基地 AFRB...................................................................................................................................... 空军预备役基地 AGL ...................................................................................................................................... 地平面以上 AIROPS .................................................................................................................................. 空中作战 ANG.................................................................................................................................. 空军国民警卫队 ANGB............................................................................................................................. 空军国民警卫队基地 ANSI ..................................................................................................................美国国家标准协会 AOR..............
项目名称:东海岸空战机动靶场 (EC/ACMR) 参与组织/人员:FPO-1:LT Bob Mayer、Don Masso、LCDR Geoff Cullison(临时值班)UCT ONE 日期:1976-1977 项目摘要:EC/ACMR 项目是 FPO-1 的一项独特工作,负责管理和执行这项耗资 1300 万美元的项目,这是海军首个海洋军事建设 (MCON) 项目。该项目涉及设计和建造四个离岸仪表塔以支持 EC/ACMR,为海军提供了独特的战斗机飞行员训练维度。靶场系统可同时跟踪多达二十架飞机,它们参与战斗/混战机动并发射模拟(副实况)电子导弹。空战和护航战术是通过实时三维显示所有靶场活动来制定和评估的,同时由训练有素的地面教官持续监控。 EC/ACMR 塔位于 83-106 英尺深的水中,距北卡罗来纳州基蒂霍克海岸 15-32 英里。靶场位于哈特拉斯角以北,该地区经常遭受强风和风暴的侵袭,被称为大西洋的墓地。预计在塔的 20 年设计寿命内,环境条件包括 62 英尺的浪高、2-3 节的海流、140 英里/小时的风速以及从冰点到 100°F 的温度。所需的设计是史无前例的——塔将安装在以前没有海上结构记录的区域。FPO-1 于 1974 年夏天首次参与该项目,当时它的任务是向靶场项目赞助商海军航空系统司令部 (NAVAIRSYSCOM) 提供海洋工程和咨询服务。NAVAIRSYSCOM 通过与 Cubic Corporation 签订的合同,将靶场开发作为海军其他采购 (OPN) 设备采购。 Cubic 开发了电子系统,并准备通过分包方式提供海上塔。1975 年夏天,在手头有初步的塔设计图时,显然资金需求将超过 OPN 指南。因此,EC/ACMR 塔的建造被纳入了 1976 财年的 NAVFAC MCON 计划。尽管 FPO-1 是海洋设施工程和建设的专业中心,但这种专业知识主要通过内部海军建设项目获得。它在海上行业方面经验不足,设计师和承包商既不熟悉也不热衷于国防部或海军设施合同程序。本质上,海上设计和建设是在成本加成的基础上采购的,客户承担所有风险和责任。最后,FPO-1 能够与俄克拉荷马州塔尔萨的 Crest Offshore 协商一份固定价格的 A&E 合同,后者接受了协商后的 20 年设计寿命责任作为费用成本。Crest Offshore 是为 NAVAIRSYSCOM 开发原始 OPN 塔设计的同一家公司。此外,FPO-1 与德克萨斯州休斯顿的 TERA 公司签订了合同,以提供设计质量保证,包括对 A&E 设计的独立分析和关键设计问题的解决。三脚塔
°C 摄氏度 °F 华氏度 µg/g 微克每克 µg/L 微克每升 µPa 微帕斯卡 µPa 2 -s 微帕斯卡平方秒 AA 空对空 AAV 两栖突击车 AAW 防空战 ac。英亩 ACM 空战机动 ADEX 防空演习 AEP 听觉诱发电位 AFB 空军基地 AFI 空军指令 AFPMB 武装部队害虫管理委员会 AG 空对地 AG 气枪 AGL 高于地面 AIC 空中拦截控制 ALMDS 机载激光水雷探测系统 AMW 两栖作战陆军 美国陆军 AS 空对地 AS 潜艇补给舰 ASUW 反水面作战 ASW 反潜作战 ATCAA 空中交通管制指定空域 AUTEC 大西洋海底测试和评估中心 BaCrO 4 铬酸钡 BAMS 广域海事监视 BIA 生物重要区域 BO 生物学观点 BOMBEX 轰炸演习 BNM 广播航海通告 BRF 行为反应函数 C 摄氏度 C-4 成分 4 CD 稠度测定 CEE 受控暴露实验 CFR 联邦法规 CG 巡洋舰 CH 4甲烷 CHAFFEX 箔条演习 CITES 濒危野生动植物种国际贸易公约 CJMT 北马里亚纳群岛联邦联合军事训练 CLZ 飞行器着陆区
°C 摄氏度 °F 华氏度 µg/g 微克每克 µg/L 微克每升 µPa 微帕斯卡 µPa 2 -s 微帕斯卡平方秒 A-A 空对空 AAV 两栖突击车 AAW 防空战 ac。英亩 ACM 空战机动 ADEX 防空演习 AEP 听觉诱发电位 AFB 空军基地 AFI 空军指令 AFPMB 武装部队害虫管理委员会 A-G 空对地 AG 气枪 AGL 高于地面 AIC 空中拦截控制 ALMDS 机载激光水雷探测系统 AMW 两栖作战陆军 美国陆军 A-S 空对地 AS 潜艇补给舰 ASUW 反水面作战 ASW 反潜作战 ATCAA 空中交通管制指定空域 AUTEC 大西洋海底测试和评估中心 BaCrO 4 铬酸钡 BAMS 广域海事监视 BIA 生物重要区域 BO 生物学观点 BOMBEX 轰炸演习 BNM 广播航海通告 BRF 行为反应函数 C 摄氏度 C-4 成分 4 CD 一致性测定 CEE 受控暴露实验C.F.R.联邦法规 CG 巡洋舰 CH 4 甲烷 CHAFFEX 箔条演习 CITES 濒危物种国际贸易公约 CJMT 北马里亚纳群岛联邦联合军事训练 CLZ 飞行器着陆区
°C 摄氏度 °F 华氏度 µg/g 微克每克 µg/L 微克每升 µPa 微帕斯卡 µPa 2 -s 微帕斯卡平方秒 AA 空对空 AAV 两栖突击车 AAW 防空战 ac。英亩 ACM 空战机动 ADEX 防空演习 AEP 听觉诱发电位 AFB 空军基地 AFI 空军指令 AFPMB 武装部队害虫管理委员会 AG 空对地 AG 气枪 AGL 高于地面 AIC 空中拦截控制 ALMDS 机载激光水雷探测系统 AMW 两栖作战陆军 美国陆军 AS 空对地 AS 潜艇补给舰 ASUW 反水面作战 ASW 反潜作战 ATCAA 空中交通管制指定空域 AUTEC 大西洋海底测试和评估中心 BaCrO 4 铬酸钡 BAMS 广域海事监视 BIA 生物重要区域 BO 生物学观点 BOMBEX 轰炸演习 BNM 广播航海通告 BRF 行为反应函数 C 摄氏度 C-4 成分 4 CD 稠度测定 CEE 受控暴露实验 CFR 联邦法规 CG 巡洋舰 CH 4甲烷 CHAFFEX 箔条演习 CITES 濒危野生动植物种国际贸易公约 CJMT 北马里亚纳群岛联邦联合军事训练 CLZ 飞行器着陆区
°C 摄氏度 °F 华氏度 µg/g 微克每克 µg/L 微克每升 µPa 微帕斯卡 µPa 2 -s 微帕斯卡平方秒 AA 空对空 AAV 两栖突击车 AAW 防空战 ac。英亩 ACM 空战机动 ADEX 防空演习 AEP 听觉诱发电位 AFB 空军基地 AFI 空军指令 AFPMB 武装部队害虫管理委员会 AG 空对地 AG 气枪 AGL 高于地面 AIC 空中拦截控制 ALMDS 机载激光水雷探测系统 AMW 两栖作战陆军 美国陆军 AS 空对地 AS 潜艇补给舰 ASUW 反水面作战 ASW 反潜作战 ATCAA 空中交通管制指定空域 AUTEC 大西洋海底测试和评估中心 BaCrO 4 铬酸钡 BAMS 广域海事监视 BIA 生物重要区域 BO 生物学观点 BOMBEX 轰炸演习 BNM 广播航海通告 BRF 行为反应函数 C 摄氏度 C-4 成分 4 CD 稠度测定 CEE 受控暴露实验 CFR 联邦法规 CG 巡洋舰 CH 4甲烷 CHAFFEX 箔条演习 CITES 濒危野生动植物种国际贸易公约 CJMT 北马里亚纳群岛联邦联合军事训练 CLZ 飞行器着陆区