第３５卷第２期重庆邮电大学学报（自然科学版）Ｖｏｌ．３５Ｎｏ．２２０２３年４月ＪｏｕｒｎａｌｏｆＣｈｏｎｇｑｉｎｇＵｎｉｖｅｒｓｉｔｙｏｆＰｏｓｔｓａｎｄＴｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ（ＮａｔｕｒａｌＳｃｉｅｎｃｅＥｄｉｔｉｏｎ）Ａｐｒ．２０２３ＤＯＩ：１０．３９７９／ｊ．ｉｓｓｎ．１６７３⁃８２５Ｘ．２０２２１１０７０３１３基于深度强化学习的无人机自组网路由算法收稿日期：２０２２⁃１１⁃０７修订日期：２０２３⁃０３⁃２０通讯作者：潘俊男ｊｕｎｎａｎｐａｎ２４＠１６３．ｃｏｍ基金项目：中国电子科技集团公司第十研究所基金（ＳＳＪ⁃２１２５⁃ＸＹ⁃００２）ＦｏｕｎｄａｔｉｏｎＩｔｅｍ：Ｔｈｅ１０ｔｈＲｅｓｅａｒｃｈＩｎｓｔｉｔｕｔｅＦｕｎｄｏｆＣｈｉｎａＥｌｅｃｔｒｏｎｉｃｓＴｅｃｈｎｏｌｏｇｙＧｒｏｕｐＣｏｒｐｏｒａｔｉｏｎ（ＳＳＪ⁃２１２５⁃ＸＹ⁃００２）乔冠华１，吴麒１，王翔１，潘俊男２，张易新２，丁建２（１．中国西南电子技术研究所成都６１００３６；２．重庆邮电大学通信与信息工程学院，重庆４０００６５）摘要：针对无人机自组网节点密度大、拓扑变换频繁，导致移动自组网复杂的问题，提出了一种基于深度强化学习（ｄｅｅｐ⁃ｒｅｉｎｆｏｒｃｅｍｅｎｔｌｅａｒｎｉｎｇ，ＤＲＬ）的分布式无人机自组网路由算法。利用ＤＲＬ感知学习无人机特征，使节点不断与环境交互、探索学习最优行动（路由）策略；通过存储经验知识，维护端到端路由，赋予无人机网络智能化重构和快速修复的能力，从而提高路径的稳定性，降低路由建立和维护开销，增强网络的鲁棒性能。仿真结果表明，提出的算法具有较好的收敛性能；在路由修复时间、端到端时延，以及网络适应性、扩展性方面都优于传统的路由算法。关键词：无人机自组网；深度强化学习；路由算法；路由修复中图分类号：ＴＮ９２９文献标志码：Ａ文章编号：１６７３⁃８２５Ｘ（２０２３）０２⁃０３３５⁃０８ＲｅｉｎｆｏｒｃｅｍｅｎｔｌｅａｒｎｉｎｇｂａｓｅｄｒｏｕｔｉｎｇａｌｇｏｒｉｔｈｍｆｏｒＵＡＶａｄ⁃ｈｏｃｎｅｔｗｏｒｋｓＱＩＡＯＧｕａｎｈｕａ１，ＷＵＱｉ１，ＷＡＮＧＸｉａｎｇ１，ＰＡＮＪｕｎｎａｎ２，ＺＨＡＮＧＹｉｘｉｎ２，ＤＩＮＧＪｉａｎ２（１．ＣｈｉｎａＳｏｕｔｈｗｅｓｔＥｌｅｃｔｒｏｎｉｃＴｅｃｈｎｏｌｏｇｙＲｅｓｅａｒｃｈＩｎｓｔｉｔｕｔｅ，Ｃｈｅｎｇｄｕ６１００３６...
