基于markov切换空间的分布式协同接入控制模型.pdfVIP

第 11 卷 第 6 期 太赫兹科学与电子信息学报 Vo1 ．11 ，No ．6 2013 年 12 月 Journal of Terahertz Science and Electronic Information Technology Dec ．，2013 文章编号 ：2095-4980(20 13)06-0969-08  基于 Markov 切换空间的分布式协同接入控 模型 刘兴华 ，奚宏生 ( 中国科学技术大学 信息科学技术学院自动化系 , 安徽 合肥 230026 ） 摘 要 ：基于 3 层架构的映射框架 ，本文以视频业务为主要研究对象 ，研究了分布式协同接 入控制系统的建模和调控机理 。不失一般性 ，假设视频业务需求近似服从泊松分布 ，而服务时间 服从指数分布 ，将一个资源节点上的业务接入状态的演化用 Markov 过程来描述 ，则所有的 N 个资 源节点的分布式协同接入控制可以由一个 Markov 切换空间控制过程来阐述 。针对构建的 Markov 切换空间控制系统 ，基于系统灵敏度的观点对系统性能进行优化 ，本文提出了基于策略梯度的随 机逼近算法 ；同时，证明了该随机逼近算法的收敛性 。此外 ，本文给出了一个仿真 实例来说明此 随机逼近算法的有效性。 关键词 ：Markov 决策过程 ；Markov 切换系统 ；性能势 ；策略迭代 中图分类号 ：TN915 文献标识码 ：A doi ：10.11805/TKYDA201306.0969 Distributed collaborative admission control model based on Markov switching space LIU Xing-hua ，XI Hong-sheng (Department of Automation, School of Information Science and Technology, University of Science and Technology of China, Hefei Anhui 230026, China) Abstract ：The modeling of distributed collaborative admission control system and mechanism are studie based on the three-layer structure of mapping framework. The video service is considered as the main research object, which is assume approximating Poisson distribution, and service time