控制与决策

作者：闫敬,徐龙,曹文强,杨睍,罗小元

单位：燕山大学 电气工程学院,河北 秦皇岛 066004,,燕山大学 电气工程学院,河北 秦皇岛 066004,,燕山大学 电气工程学院,河北 秦皇岛 066004,,燕山大学 电气工程学院,河北 秦皇岛 066004,,燕山大学 电气工程学院,河北 秦皇岛 066004,

关键词：信道预测;潜器;编队控制;深度强化学习;联合优化

基金：国家自然科学基金项目(62222314,61973263,61873345,62033011)；河北省自然科学基金项目(2022203001,BJ2020031)；河北省中央引导地方基金项目(226Z3201G).

考虑水下未知信道与不确定模型参数,提出基于深度强化学习的多潜器编队控制算法.首先,提出基于环境采样数据的最小二乘估计器,用于预测在衰落环境下的未知信道;其次,根据信道预测估计器得出的信噪比(SNR),建立通信有效性与编队稳定性的联合优化问题,并给出基于深度强化学习-深度确定性策略梯度算法(DDPG)的编队控制算法;最后,通过仿真与实验结果验证所提出算法的有效性,参考仿真结果并相比于直接编队控制,考虑通信有效性的情况下所提出算法提升了13.5%的通信性能.

来源：2023年第5期

《控制与决策》期刊编辑部

查看控制与决策杂志2023年第5期