基于强化学习的异构无线网络资源管理算法-信息通信学术期刊网.PDFVIP

电信 科 学 2015 年第 8 期 研 究与开发 基于强化学 习的异构无线网络资源管理算法 冯 陈伟 ，袁 江 南 （厦 门理 工 学院光 电与通信 工程 学院 厦 门 361024 ） 摘 要 ：为 了充 分 利 用 各 种 无 线 网络 的资 源 ，需 要 实 现 异 构 网络 的融 合 ，而 异 构 网络 的融 合 又 面 临接 入 控 制 与 资 源 分 配 的 问 题 。 为 此 ， 提 出 一 种 基 于 强 化 学 习 的 异 构 无 线 网 络 资 源 管 理 算 法 ， 该 算 法 引 入 D2D （device-to-device ）通 信 模 式 ，并 可 以根 据 终 端 不 同 的业 务 类 型 、终 端 移 动 性 及 网络 负 载 条 件 等 状 态 ，选 择 合 适 的 网络 接 入 方 式 。 同时 ，为 降低 存 储 需 求 ，采 用 神 经 网络 技 术 解 决 连 续 状 态 空 间 问题 。仿 真 结 果 表 明 ，该 算 法 具 有 高 效 的在 线 学 习能 力 ，能 够 有 效 地 提 升 网络 的频 谱 效 用 ，降低 阻塞 率 ，从 而 实 现 自主 的无 线 资 源 管 理 。 关 键 词 ：异 构 无 线 网络 ；接 入 控 制 ；资 源 管 理 ；强 化 学 习 ；Q 学 习 doi： 10.11959／j .issn.1000-080 1.20 15195 Heterogeneous Wireless Network Resource Management Algorithm Based on Reinforcement Learning Feng Chenwei， Yuan Jiangnan （ School of Opto-Electronic and Communication Engineering， Xiamen University of Technology， Xiamen 361024， China） Abstract： In order to make full use of the resources of all kinds of wireless network， the integration of heterogeneous network is necessary. However， when it comes to the heterogeneous network integration， the problems of call request access control and resource management emerge. A reinforcement-learning-based algorithm was presented for heterogeneous wireless network resource management. D2D （device-to-device） communication was introduced into the proposed algorithm and the appropriate network for access could be selected according to different traffic types， terminal mobility， network load sta