基于深度强化学习的无人机辅助物联网多目标优化
DOI:
CSTR:
作者:
作者单位:

作者简介:

通讯作者:

中图分类号:

TN929.5

基金项目:

网络与交换技术全国重点实验室(北京邮电大学)开放课题项目(SKLNST-2023-1-13) 资助


Multi-objective optimization of unmanned aerial vehicle assisted internet of things based on deep reinforcement learning
Author:
Affiliation:

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    无人机辅助无线供电物联网是一种创新的网络架构,利用无人机作为能量传输中介,能够解决物联网设备电力供应 的限制和局限性。针对无人机辅助无线供电物联网网络中多目标控制策略学习的问题,提出了一种基于深度强化学习的多 目标双延迟深度确定性策略梯度(MOTD3) 算法,旨在满足偏航角、飞行速度以及发射功率约束条件下,实现总数据速率、总 收获能量最大化以及能耗和悬停时间最小化的多目标联合优化,同时因需求动态变化无人机进行在线路径规划。仿真结果 表明,该算法在保证良好的收敛情况和稳定性前提下,较其他算法在总数据速率、总收获能量、能耗与悬停时间方面分别提高 14.7%、10.6%、6.1%和10.3%,且具有较强泛化能力,可适用于实际中不同通信场景。

    Abstract:

    The unmanned aerial vehicle(UAV)-assisted wireless power supply for the internet of things(IoT)is an innovative network architecture where UAVs serve as energy transmission intermediaries,effectively addressing the limitations and constraints of power supply for loT devices.In addressing the challenge of multi-objective control policy learning in UAV-assisted wireless power supply for the IoT,this study proposes a multi-objective twin-delay deep deterministic policy gradient(MOTD3)algorithm based on deep reinforcement learning.The MOTD3 algorithm aims to achieve joint optimization of multiple objectives,including maximizing the total data rate and total harvested energy, while minimizing energy consumption and hover time,under constraints such as yaw angle,flight speed,and transmission power.Additionally,it adapts UAVs to dynamic demand changes through online path planning.Simulation results demonstrate that the proposed algorithm can improve the total data rate,total harvest energy,energy consumption and hover time by 14.7%,10.6%,6.1%and 10.3%respectively compared with other algorithms,and has strong generalization ability,which can be applied to different communication scenarios in practice.

    参考文献
    相似文献
    引证文献
引用本文

徐钰龙,李 君,李正权,胡 静,张 圣,王子威.基于深度强化学习的无人机辅助物联网多目标优化[J].国外电子测量技术,2024,43(5):26-35

复制
分享
文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2024-06-25
  • 出版日期:
文章二维码
×
《国外电子测量技术》
财务封账不开票通知