logo

您所在位置网站首页 > 海量文档  > 理工科 > 基础科学

一种Hadoop Yarn的资源调度方法研究.pdf 8页

本文档一共被下载: ,您可全文免费在线阅读后下载本文档。

  • 支付并下载
  • 收藏该文档
  • 百度一下本文档
  • 修改文档简介
全屏预览

下载提示

1.本站不保证该用户上传的文档完整性,不预览、不比对内容而直接下载产生的反悔问题本站不予受理。
2.该文档所得收入(下载+内容+预览三)归上传者、原创者。
3.登录后可充值,立即自动返金币,充值渠道很便利
特别说明: 下载前务必先预览,自己验证一下是不是你要下载的文档。
  • 上传作者 江南春(上传创作收益人)
  • 发布时间:2019-08-13
  • 需要金币50(10金币=人民币1元)
  • 浏览人气
  • 下载次数
  • 收藏次数
  • 文件大小:1.8 MB
下载过该文档的会员
你可能关注的文档:
第5期 电  子  学  报 Vol.44 No.5 2016年5月 ACTAELECTRONICASINICA May 2016 一种 HadoopYarn的资源调度方法研究 1 1 2 1 李媛祯 ,杨 群 ,赖尚琦 ,李博涵 (1南京航空航天大学计算机科学与技术学院,江苏南京210016;2香港大学计算机科学与技术系,香港)   摘 要: 针对HadoopYarn资源调度问题,为提高集群作业执行效率,提出一种基于蚁群算法与粒子群算法的 自适应Hadoop资源调度算法SRSAPH.SRSAPH中,通过HadoopYarn跳通信机制获取负载、内存、CPU速度等属性信 息初始化信息素矩阵;同时,将粒子群算法的自我认知能力与社会认知能力引入到蚁群算法,提高算法的收敛速度;此 外,根据蚁群算法全局最优解的波动趋势动态调整信息素挥发系数,提高解的精度.实验表明,采用SRSAPH进行资源 调度,集群的作业执行时间缩短至少10%. 关键词: 资源调度;蚁群算法;粒子群算法;HadoopYarn 中图分类号: TP3016   文献标识码: A   文章编号: 03722112(2016)05101708 电子学报URL:http://www.ejournal.org.cn  DOI:10.3969/j.issn.03722112.2016.05.002 AStudyonSchedulingMethodofHadoopYarn 1 1 2 1 LIYuanzhen,YANGQun,LAIShangqi,LIBohan (1ComputerScienceandTechnologyCollege,NanjingUniversityofAeronauticsandAstronautics,Nanjing,Jiangsu210016,China; 2DepartmentofComputerScience,TheUniversityofHongKong,HongKong,China) Abstract: InviewoftheresourceschedulingproblemofHadoopYarn,toimprovetheexecutionefficiencyofthe clusterjob,weproposeaSelfadaptResourceSchedulingalgorithmbasedonAntColonyAlgorithmandParticleSwarmAl gorithminHadoop(SRSAPH).InSRSAPH,weinitializethepheromonematrixofSRSAPHbyusingtheattributeinforma tionofload,memory,andCPUspeedobtainedthroughtheheartbeatmessagetransfermechanism.Meanwhile,weintroduce theselfcognitiveabilityandsocialcognitionabilityofparticleswarmalgorithmintotheantcolonyalgorithmtospeedupthe rateofconvergenceofthealgorithm.Moreover,wedynamicallyadjustthepheromoneevaporationratebasedonthefluctua tiontrendsofglobaloptimalsolutiontoenhancetheaccuracyofthesolutions.Experime

发表评论

请自觉遵守互联网相关的政策法规,严禁发布色情、暴力、反动的言论。
用户名: 验证码: 点击我更换图片

“原创力文档”前称为“文档投稿赚钱网”,本站为“文档C2C交易模式”,即用户上传的文档直接卖给(下载)用户,本站只是中间服务平台,本站所有文档下载所得的收益归上传人(含作者)所有【成交的100%(原创)】。原创力文档是网络服务平台方,若您的权利被侵害,侵权客服QQ:3005833200 电话:19940600175 欢迎举报,上传者QQ群:784321556