申请/专利权人：中国人民解放军国防科技大学

申请日：2023-05-24

公开（公告）日：2024-03-22

公开（公告）号：CN116744311B

主分类号：H04W16/14

分类号：H04W16/14;H04W4/08;H04W24/02;H04W72/02;H04W72/0453;H04W72/50;G06N20/00

优先权：

专利状态码：有效-授权

法律状态：2024.03.22#授权;2023.09.29#实质审查的生效;2023.09.12#公开

摘要：本发明公开了一种基于PER‑DDQN的用户组频谱接入方法，所述方法包括如下步骤：在分布式动态频谱接入场景下，每个用户组作为一个智能体，单个用户组作为智能体拥有各自的DRL模型，独立学习分配策略，每个DRL模型采用优先经验回放机制结合双网络结构的DQN算法；从组内用户中分别选取发射方和接收方，并将所选信道分配给发射方，用来传输业务信息，实现组内信息共享；根据组内成员业务处理情况进行频谱接入，实现组内业务信息传输，完成对频谱资源的利用。所述方法具有收敛速度更快，性能更好等优点。

主权项：1.一种基于PER-DDQN的用户组频谱接入方法，其特征在于所述方法包括如下步骤：在分布式动态频谱接入场景下，每个用户组作为一个智能体，定义智能体的状态空间、动作空间以及奖励设置，对认知无线网络中的授权信道进行选择；单个用户组作为智能体拥有各自的DRL模型，独立学习分配策略，每个DRL模型采用优先经验回放机制结合双网络结构的DQN算法；从组内用户中分别选取发射方和接收方，并将所选信道分配给发射方，用来传输业务信息，实现组内信息共享；根据组内成员业务处理情况进行频谱接入，实现组内业务信息传输，完成对频谱资源的利用；状态空间为每个时隙选择的信道和组内用户的业务处理状态；每个用户组的动作为根据组内用户的业务处理状态，分别选取发射方和接收方，作为发射方的用户接入信道广播式传输业务数据给其覆盖范围内的接收方用户；动作的收益则是频谱接入是否合理，组内用户信息量是否增加，进而激励每个用户组做出正确的分配策略；构造用户组模型的方法如下：根据所需处理的通信业务种类将该无线网络下的用户划分成N个用户组，一个用户组处理一种业务，每种业务包含的数据量不同，用户组之间共享L个授权无线信道，每个时隙开始时，所有授权信道均为空闲可用状态，一个用户组作为一个智能体，随机选择一个信道接入，该用户组内的发射方在此信道上传输数据；多个用户组可以选择接入相同信道，通过分布式频谱接入，实现频谱资源共享；一个用户组内包含M个用户，组内用户之间通过信息共享来处理业务；智能体选择组内部分用户接入频谱，该部分用户作为发射方，将业务信息广播式传输给其范围内的其他用户；当一个组内全部用户都完全拥有所需业务信息时，表示该组业务已完成，停止信道接入并结束组内传输；用户组频谱接入的目的是充分利用组内用户资源，缩短整体用户组的业务处理时长；当用户被选择作为发射方时，在其传输范围内的同组用户作为接收方存在3种情况：1该接收方仅在同组一个发射方的传输范围内，则该接收方接受对应发射方的信号，其余信号作为干扰信号；2该接收方位于同组多个发射方传输范围内的覆盖区域中，则计算该接收方处接收到的所有信干噪比，选择最大的信干噪比作为其对应的发射方，并将其余信号作为干扰信号；3该接收方不在同组发射方的传输范围内，无法接收到信号，对应用户信息增量为0；当被选作为接收方的用户已经完全拥有业务信息量时，该用户不再接收信息，对应用户信息增量为0；作为接收方的第m个用户接到的信干噪比如公式1所示： 式中，p表示作为发射方用户的发射功率；|hmj|2表示作为接收方的第m个用户到其对应的作为发射方的第j个用户的信道增益；|hmk|2表示作为干扰方的第k个用户到作为接收方的第m个用户的信道增益，k≠m且k≠j；B表示信道的带宽；N0表示用户接收到的噪声频谱密度；第m个用户的传输速率可由公式2所示：Vm＝log21+SINRm2设第i个用户组所需处理的业务数据量大小为Ci，第i个用户组中第m个用户每个时隙的信息增量表示为可由公式3计算得到： 其中，表示第i组第m个用户已拥有的信息量，如果则表示该用户已经接收完成，不再作为接收方，可作为发送方将文件传输给其他用户；如果则表示该用户未完全接收业务文件，将被继续作为接收方；μ表示用户作为接收方要求达到的SINR阈值；所有接收方用户接收到的SINR都要大于或等于设定的阈值，否则传输失败，信息增量为0；当时，表示该用户组的业务处理完成，不再占用频谱资源；因此，用户组频谱接入问题的优化目标如公式4所示： 所述状态空间的构造方法包括如下步骤：将业务处理时长划分成若干个时隙，每个时隙开始时，每个信道均处于可用状态；第i个用户组的状态分为两个部分：其中，表示第i个用户组当前时隙所选的信道号，第i个用户组从L个信道中选择一个信道接入，表示第i个用户组已经处理完该组业务，保持等待状态，不再接入信道；表示第i个用户组选择了第个信道；表示当前时隙开始时，第i个用户组组内用户业务处理状态；gm∈{0,1}，当wm＝Ci时，gm＝1，表示第i组的第m个用户已完成业务，其用户信息量不再增加；当wm＜Ci时，gm＝0，表示第i组的第m个用户还未完成业务，继续作为接收方接收对应发射机用户传输的信息。

全文数据：

权利要求：

百度查询： 中国人民解放军国防科技大学 基于PER-DDQN的用户组频谱接入方法

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD