基于增强学习与QoE需求函数的自适应无线网络择取优化机制.pdfVIP

第32卷第7期 计算机应用与软件 V0l_32 No．7 2015年7月 ComputerApplicationsandSoftware Ju1．2015 基于增强学习与 QoE需求函数的自适应无线网络择取优化机制 高继勋 马小雨 (河南T程学院计算机学院 河南 郑州 451191) 摘 要 为了使网络择取机制能在未知的网络信息条件下仍可适应复杂多变的网络；并可迎合客户动态变化的QoE需求，丑能 对其进行优化，提出了增强学习与QoE需求函数相融合的自适应网络择取优化机制。从各类用户出发，划分不同性质的业务，并引 入随机离散原则，建立QoE需求函数；根据QoE反馈信号，兼顾切换决策的主观与客观性，嵌入最小二乘法，构建 网络切换决策优化 模型，获得决策最优值；计算切换开销与客户需求的概率中间值，并定义了最优网络切换规则，耦合增强学习对网络进行择取／切换； 设计增强学习参数更新法，完成会话业务发送。在MATLAB仿真平台上对该机制以及其他几种无线网络择取方法进行了测试 ，实 验结果显示：随着网络切换开销权重的不断增大以及转移概率矩阵的实时变化，所提出的机制的性能最好，而且最稳定。 关键词 增强学习 QoE需求函数 决策优化 自适应网络择取机制 开销权重 转移概率矩阵 中图分类号 TP3 文献标识码 A DOI：10．3969／j．issn．1000-386x．2015．07．035 ADAPTIVE W IRELESSNETW oRK SELECTIoN oPT玎 ISATIoN MECHANISM BASED oNREINFoRCEⅣⅡNTLEARNINGANDQoEDEMANDFUNCTIoN GaoJixun MaXiaoyu (SchoolofComputer，ttenanImtit~eofEngineering，Zhengzhou451191，Henan，China) Abstract Inordertomakethenetworkselectionmechanism adapttothecomplexandchangingnewtorkundertheeonditionofunknown networkinformationandtocaterfortheQoEdemandofusersdynamicchnages，aswella8canbeoptimised，weproposetheadaptivenetwork selectionoptimisationmechanismwhichintegratesthereinforcementlearningandQoEdemandfunction．Itsegmentshtebusinesseswithdif- ferentnaturesfromtheviewofeachkindofcustomer，andintroducesrandomdiscretionprincipletosetupQoEdemandfunction；according tothefeedingsignalfromQoE，ittakesintoaccountbohtthesubjectivityandobjectivityofswitchingdecisions，embedstheleastsquares methodna dbuildshteoptimisednewtorkswitchingmodelaswellasgetshteoptimaldecisionvalue；Itcalculatesthecompromiseprobability ofswitchingexpensenad userneeds，and definesthebestnetworkswitchingrules，thencouplesthereinforcementlearningtoselectand switchhtenetwork；Finally，itcompleteshtesessionservi