申请/专利权人：诺基亚通信公司

申请日：2018-03-27

公开（公告）日：2024-04-12

公开（公告）号：CN112204580B

主分类号：H04W72/044

分类号：H04W72/044;H04W72/12;G06N3/092;G06N3/0464;G06N3/045;G06N7/01

优先权：

专利状态码：有效-授权

法律状态：2024.04.12#授权;2021.01.26#实质审查的生效;2021.01.08#公开

摘要：一种确定动作序列的方法，包括：训练第一深度Q网络DQN；提供第一多维矩阵的多个条目作为对DQN的输入，第一矩阵表示第一状态，第一矩阵的每个条目表示在第一状态中可以被采取的动作；使用第一DQN分别针对第一矩阵的多个条目确定多个Q值；执行第一动作，第一动作是由来自多个条目中的如下条目表示的动作，针对该条目第一DQN确定了所确定的多个Q值中的最高Q值；基于执行第一动作来累积奖励；以及根据第一组规则和所执行的第一动作来从第一状态转变到下一状态。

主权项：1.一种确定动作序列的方法，所述方法包括：训练第一深度Q网络DQN；提供第一多维矩阵的多个条目作为对所述DQN的输入，所述第一多维矩阵表示第一状态，所述第一多维矩阵的每个条目表示在所述第一状态中能够被采取的动作；使用所述第一DQN，分别针对所述第一多维矩阵的所述多个条目确定多个Q值；执行第一动作，所述第一动作是由来自所述多个条目中的如下条目表示的动作，针对所述条目所述第一DQN确定了所确定的所述多个Q值中的最高Q值，所述多个Q值分别对应于多个用户设备UE波束对，并且其中执行所述第一动作包括在无线通信网络中分配资源，并且所述分配包括针对当前传输时间间隔TTI将基于所述多个Q值从所述多个UE波束对中选择的UE波束对中包括的UE分配给所选择的所述UE波束对中包括的波束；基于执行所述第一动作来累积奖励；以及根据第一组规则和所执行的所述第一动作来从所述第一状态转变到下一状态。

全文数据：

权利要求：

百度查询： 诺基亚通信公司 使用深度Q网络促进资源配对的方法和装置

免责声明
1、本报告根据公开、合法渠道获得相关数据和信息，力求客观、公正，但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解，仅供参考使用，不能作为本公司承担任何法律责任的依据或者凭证。

阅读全文 双屏查看 官方信息 专利公告 收藏专利 下载PDF 下载WORD