面向能源感知的虚拟机深度强化学习调度算法研究.pdfVIP

://

httwww．skx．com

pjj

:/

DOI１０．１１８９６skx．２３０１０００３１

jj

面向能源感知的虚拟机深度强化学习调度算法研究

王杨民胡成玉颜雪松曾德泽

()

中国地质大学武汉计算机科学与技术学院武汉

４３００７８

()

１３９７９９５２４０＠．com

qq

,、.,

摘要随着计算机技术的快速发展云计算技术成为了解决用户存储算力需求的最佳方法之一其中基于架构

NUMA

.,,

的动态虚拟机调度成为了学术界和工业界关注的热点方向但是目前的研究中基于启发式的算法难以对虚拟机进行实时调

,.,

度并且大多数文献没有考虑NUMA架构下虚拟机调度产生的能耗等问题对此提出了一种基于深度强化学习的大型移动

,;(

云中心虚拟机服务迁移框架构建了NUMA架构下的能耗模型提出了自适应奖励的分层自适应柔性演员评论家算法HieＧ

,);,

在云计算场景下将所提算法与种经典的深度强化学习方法进行实

rarchicalAdativeSamlinSoftActorCriticHASAC３

ppg

.,,.,

验对比实验结果表明所提改进算法在不同场景下可以处理更多的用户请求且消耗的能源较少此外对算法中各种策略

,.

进行消融实验证明了所提策略的有效性

:;;;;

关键词NUMA架构深度学习强化学习能源感知分层缓冲区

中图分类号TP１８１

StudonDeeReinforcementLearninforEnerＧawareVirtualMachineSchedulin

ypggyg

,,

WANGYanminHUChenuYANXuesonandZENGDeze

ggyg

,(),