ic回归模型的Hadoop本地任务调度优化算法.PDFVIP

第３４卷第３期 计 算 机 应 用 研 究 Ｖｏｌ３４Ｎｏ３ ２０１７年３月　 ＡｐｐｌｉｃａｔｉｏｎＲｅｓｅａｒｃｈｏｆＣｏｍｐｕｔｅｒｓ Ｍａｒ．２０１７ 基于ｌｏｇｉｓｔｉｃ回归模型的 Ｈａｄｏｏｐ本地任务调度优化算法 １ １ ２ １ １ 帅仁俊 ，沈　阳 ，陈　平 ，潘　静 ，董亚楠 （１．南京工业大学计算机科学与技术学院，南京２１１８１６；２．南京市卫生信息中心，南京２１０００３） 摘　要：当一个工作节点有多个本地任务可执行时，默认情况下，调度器都是按照任务被发现的先后顺序来进 行执行，效率低下。为了优化对本地任务的调度，提出了一种基于机器学习的Ｈａｄｏｏｐ本地任务调度优化算法。 选取定义与任务相关的特征向量，然后基于ｌｏｇｉｓｔｉｃ回归模型的机器学习