公开(公告)号：CN109474960B

公开(公告)日：2022-04-29

申请号：CN201811354642.6

申请日：2018-11-14

Applicant: 南京邮电大学

Inventor： 陈美娟 ,  管明锋 ,  姚娟娟 ,  谭琛

IPC: H04W28/10

Abstract: 本发明提出了一种基于Q学习的双连接流量控制方法。该方法在用户同时和主、从基站连接的情况下，以数据传输的业务时延最小为目的，采用Q学习方法得到网络发送给用户的业务流量在两个网络间进行分配的最优策略。系统状态空间为三维数组S＝{sm，ss，sa}，sm和ss分别代表主基站队列和从基站队列中包括正在接收的分组在内的所有分组的数目，sa代表到达流量的分组数目。动作集合定义为A，不同动作分别表示有多少分组分配给主基站和从基站。回报函数定义为两条支路时延差值的函数，差值越小回报函数越大。利用训练好的Q矩阵可以很容易从任意状态出发快速找到双连接的最佳流量分配策略，实现了多网络间系统资源的优化使用，达到了时延敏感业务的QOS要求。

公开(公告)号：CN109474960A

公开(公告)日：2019-03-15

申请号：CN201811354642.6

申请日：2018-11-14

Applicant: 南京邮电大学

Inventor： 陈美娟 ,  管明锋 ,  姚娟娟 ,  谭琛

IPC: H04W28/10

Abstract: 本发明提出了一种基于Q学习的双连接流量控制方法。该方法在用户同时和主、从基站连接的情况下，以数据传输的业务时延最小为目的，采用Q学习方法得到网络发送给用户的业务流量在两个网络间进行分配的最优策略。系统状态空间为三维数组S＝{sm，ss，sa}，sm和ss分别代表主基站队列和从基站队列中包括正在接收的分组在内的所有分组的数目，sa代表到达流量的分组数目。动作集合定义为A，不同动作分别表示有多少分组分配给主基站和从基站。回报函数定义为两条支路时延差值的函数，差值越小回报函数越大。利用训练好的Q矩阵可以很容易从任意状态出发快速找到双连接的最佳流量分配策略，实现了多网络间系统资源的优化使用，达到了时延敏感业务的QOS要求。