基于能效和服务质量保障的动态资源分配机制.docVIP

基于能效和服务质量保障的动态资源分 配机制 杨健张晶 中国电壬魁技集团公司第五十四研宄所 以最小化平均消耗功率为目标，提出丫一种具有服务质量保障的用户调度和功 率分配机制。每个用户维持一个用于存储随机到达业务的数据队列，用户的服务 质量耍求被刻岡成平均排队时延。基于无线信道和数据队列长度的动态变化，将 用户调度和功率分配刻画成一个带有约束条件的马尔可夫决策问题。为了应对系 统难以精确获取信道和数据到达过程分布参数的情况，采用Q学4算法求解马 尔科夫决策问题，进而提出丫一种在线学习的用户调度和功率控制算法。系统通 过在线学习进行用户调度和功率分配，以实现平均消耗功率的最小化目标。 关键词： 用户调度;功率控制;服务质量要求;马尔可夫决策;Q学冰 基金：河北自然科学基金项0 （F2014210123） Power Efficient Resource Allocation with QoS Guaranteed The 54th Research Institute of CECT; Abstract： In this paper， a joint user scheduling and power control scheme is investigated for systems with quality of service (QoS) requirements to minimize the time-averaged power consumption. Each user maintains a buffer to store random arrival data, and the QoS requirements are characterized by the time-averaged queuing delay.The joint user scheduling and power control is formulated as a constrained Markov decision problem (CMDP) according to the dynamics of the wireless channels and the length of data buffers. An onl ine learning based algorithm is proposed by solving the CMDP with the aid of Q-learning approach， based on which the system, without prior knowledge of the distributions of wireless channels and data arrivals， can make a user scheduling and power control decision to minimize the time-averaged power consumption. Keyword： user scheduling; power control; QoS requirement; Markov decision; Q-learning; 0引言 随着无线通信技术的高速发展和移动设备的大规模应用，无线网络承载Y种类 繁多的业务，但是无线通信中的能耗己成为不容忽视的问题U1。同时，业务数 据在无线网络传输过程中有其所需的服务质量，业务数据的服务质量保障面临 着严重的挑战m。而无线信道的时变特性和有限的网络承载能力对网络的能效 和业务的服务质量保障产生严重影响。因此如何设计冇效的资源动态分配算法和 用户调度策略用以保障服务质量是一个永恒的挑战［3-6］。 文献［7］将服务质量要求量化为实时传输速率限制条件，以最小化传输功率为目 标，提出了一种功率和用户调度机制。文献［8］将服务质量要求量化为用户之间 的实时传输速率比例限制条件，并提出了一种能量有效的功率控制和用户调度 算法。针对服务质量要求用户和无服务质量要求用户共存的无线网络，文献［9］ 提出了一种优先保障用户服务质量要求的资源分配和用户调度算法。 尽管文献［7-9］提出的算法在相应场景下都能实现相应系统效能的最优化，并能 很好的保障用户服务质量要求。但文献［7-9］提出的算法都是基于信道状态信息, 通过传统的凸优化理论实现的。然而，在实际系统中，每个用户在数据链路层都 维持着一个用于存储随机到达业务的数据队列。因此，在面向实际系统设计具冇 服务质量保障的资源分配算法时，必须同时考虑信道状态信息和用户数据队列 状态信息。 从保障实际系统服务质量的角度出发，以最小化平均消耗功率为目标，提出了 一种基于信道状态信息和用户数