Hadoop平台下公平调度器算法地研究.pdfVIP

Hadoop平台下公平调度器算法的研究 周根鸿 阳国贵 国防科学技术大学，计算机学院，湖南，410073 摘要：Hadoop[1]平台下的作业调度器主要有三种：先进先出调度器(FIFO)[4]、计算能力调 度器(CapacityScheduler)[4]和公平调度器(FairScheduler)[4]，其中公平调度器是为应对多用户 共享集群下多类型作业的并行执行而设计。本文首先介绍了Hadoop平台下作业调度机制， 然后分析了公平调度器的算法，针对存在的不足之处提出了相应的改进方法。最后对作业调 度技术的发展趋势进行了展望。 关键词：Hadoop；作业调度；FIFO；公平调度器 ResearchofFairscheduleralgorithminHadoopplatform ZhouGenhongYangGuogui DepartmentofComputerScienceandTechnology,NUDT,Changsha410073,China Abstract:JobschedulerintheHadoopplatformaremainlythreetyp