基于强化学习的卫星协作缓存和用户接入方法

    公开(公告)号:CN117879680A

    公开(公告)日:2024-04-12

    申请号:CN202311770292.2

    申请日:2023-12-21

    Abstract: 本发明公开了一种基于强化学习的卫星协作缓存和用户接入方法,包括:构建地轨卫星网络模型,基于所述地轨卫星网络模型建立卫星与用户之间的链路可用性模型、内容缓存与用户接入模型以及卫星与用户的通信模型;以最小化网络模型长期的内容服务延迟为优化目标,以卫星的缓存容量限制、协作缓存卫星的跳数限制、用户的接入策略限制为约束条件,建立了缓存放置和用户接入的联合优化问题P1;将缓存放置和用户接入的联合优化问题P1转化为最大化长期奖励MDP问题;利用基于双层DQN的强化学习算法求解最大化长期奖励MDP问题,最终获得网络模型长期奖励最大时的协作缓存放置策略和用户接入策略。本发明有效减少了网络中的服务时延。

Patent Agency Ranking