基于深度强化学习的低轨巨型星座卫星切换方法及装置

本发明公开了一种基于深度强化学习的低轨巨型星座卫星切换方法及装置，该方法包括：获取用户终端可视范围内的卫星信息；确定包括用户终端与卫星之间的可用信道容量、用户终端与卫星的剩余服务时间、卫星对应的升降轨道类型和卫星到设定网关卫星的最小跳数的状态信息；将状态信息输入第一神经网络模型，得到模型输出的状态‑动作价值函数，模型采用深度强化学习算法进行训练，动作定义为用户终端选择的卫星，动作奖励函数定义为根据可用信道容量、剩余服务时间和最小跳数构建的效用函数；选取最大的状态‑动作价值函数对应的卫星作为接入卫星进行切换。本发明能够在保证较低的切换次数同时显著降低星间链路跳数水平，以保持较低的网络时延。