XiaoMi-AI文件搜索系统
World File Search System保证服务
使用深度强化学习的延迟保证服务的下行链路调度程序
摘要 - 在本文中，我们提出了一种新型的调度方案，以确保单跳无线网络的每包延迟，以延迟关键应用程序。我们考虑了几类具有不同延迟要求的包装，高级数据包在成功传输后产生高实用性。考虑到竞争数据包之间延迟的相关性，我们应用了延迟范围的概念，并为调度决策引入了新的输出增益功能。特别是，选择数据包的选择不仅要考虑其输出增益，还考虑了其他数据包的延迟范围。在这种情况下，我们制定了一个多目标优化问题，旨在最小化平均队列长度，同时在保证每包延迟的约束下最大化平均输出增益。然而，由于环境的不确定性（例如，时变通道条件和随机数据包到达），使用传统的优化技术解决此问题是困难的，而且通常是不切实际的。我们开发了基于深入的增强学习（DRL）的框架来解决它。特别是，我们将原始优化问题分解为一组标量优化子问题，并将它们都作为部分可观察到的马尔可夫决策过程（POMDP）。然后，我们求助于基于双重Q网络（DDQN）的算法，以学习每个子问题的最佳调度策略，这是CanoverComethelarge-ScalestatesPaceAstatesPaceAndredCeanDreduceq-valueoveres-timation。仿真结果表明，我们提出的基于DDQN的算法在奖励和学习速度方面优于常规Q学习算法。此外，与其他基准方案相比，我们提出的调度方案可以显着减少平均延迟和延迟中断率。
课程编号 课程名称 模块 托管课程 备注 BMME005 保证服务 3 AFM BMME179 管理控制 3 AFM BMME119 数字化转型中的创新
课程代码 课程名称 区块 托管课程 备注 BMME005 鉴证服务 3 AFM BMME179 管理控制 3 AFM BMME119 数字时代的创新 3 BIM BMME149 数字技术与社会变革 3 BIM BMME203 平台组织与治理 3 BIM BMME027 高级评估与价值创造 3 FI *仅对 FI 先决条件有效 BMME034 创业金融与私募股权 3 FI *仅对 FI 先决条件有效 BMME172 投资管理 3 FI *仅对 FI 先决条件有效 BMME037 管理非政府组织 3 GBS BMME040 可持续商业模式 3 GBS BMME157 变革运动：组织内外的社会运动与抗议 3 GBS BMME170 组织与自然环境 3 GBS BMME048 创新与标准化管理 3 MI BMME205 远见和未来思维 3 MI BMME043 高绩效领导力 3 MI, POC BMME053 广告和沟通 3 MM BMME100 定价：创造和获取价值 3 MM BMME144 以客户为中心 3 MM BMME192 消费者心理学和新兴技术 3 MM BMME042 管理多样性 3 POC BMME135 企业中的激励和协调 3 POC BMME070 战略采购 3 SCM BMME075 供应链预测 3 SCM BMME122 商品贸易和供应网络 3 SCM BMME076 在没有资源的情况下完成工作 3 SE, SM BMME182 扩大规模和高增长战略 3 SE, SM BMME087 战略领导力和公司治理 3 SM BMME089 管理并购视角 3 SM BMME147-3 使用 Python 编程基础 - 模块 3 3 SM BMME004 税务 4 AFM BMME154 循环和数字业务设计 4 BIM BMME155 以人为本的流程开发 4 BIM BMME177 数据隐私和网络安全 4 BIM BMME021 衍生品 4 FI *仅对 FI 先决条件有效 BMME023 银行和金融机构 4 FI *仅对 FI 先决条件有效 BMME025 并购 4 FI *仅对 FI 先决条件有效 BMME030 房地产金融 4 FI BMME116 金融数据分析 4 FI *仅对 FI 先决条件有效 BMME113 可持续金融 4 FI、GBS、SM *仅对 FI 先决条件有效 BMME143 企业社会投资者作为积极变革的力量 4 GBS BMME175 可持续性会计与报告 4 GBS BMME178-4 循环经济：战略与商业模式 - 模块 4 4 GBS, MI BMME186 医疗保健领域的数字化转型 4 MBI, MI BMME094 医疗保健采购与价值链管理 4 MBI, SCM BMME078 创业实验室 4 MBI, SE BMME079 新业务拓展 4 MI, SE BMME055 营销分析 4 MM BMME057 神经营销 4 MM BMME060 新产品营销 4 MM BMME181 噪音：理解人类判断和预测中的错误 4 MM BMME193 平台经济学与营销 4 MM BMME161 销售队伍领导力 4 MM,POC BMME044 组织变革科学与组织变革艺术 4 POC BMME150 谈判 4 POC BMME165 咨询基础 4 POC BMME074 全球网络中的端口 4 SCM BMME105 行为运营管理 4 SCM BMME136 组织技术转型 4 SE, SM BMME183 应用于战略咨询和创业的机器学习 4 SE, SM BMME110 战略性创新管理 4 SM BMME147-4 使用 Python 的编程基础 - 模块 4 4 SM BMME156 战略决策 4 SM BMME204 并购与联盟中的知识产权管理 4 SM BMME130 综合测量与报告 5 AFM BMME115 行为金融学 5 AFM, FI BMME131 平台战略与经济学5 BIM BMME201 数字能源转型 5 BIM BMME202 人工智能/计算机交互 5 BIM BMME028 金融科技与区块链 5 FI *仅具备 FI 先决条件 BMME036 量化投资策略 5 FI *仅具备 FI 先决条件 BMME098 财务困境与企业重组 5 FI *仅具备 FI 先决条件 BMME173 风险管理与固定收益 5 FI *仅具备 FI 先决条件 BMME200 家族企业财务管理 5 FI *仅具备 FI 先决条件 BMMME187 新时代的创新管理：web3 5 MI BMME059 选择架构 5 MM BMME061 品牌发展 5 MM BMME099 客户体验管理 5 MM BMME129 消费者偏好的数字足迹 5 MM BMME046 领导力发展与培训5 POC BMME151 人才获取 5 POC