MapReduce架构中JobTracker与TaskTracker角色与功能概述.pdfVIP

  • 0
  • 0
  • 约小于1千字
  • 约 2页
  • 2026-08-10 发布于北京
  • 举报

MapReduce架构中JobTracker与TaskTracker角色与功能概述.pdf

MapReduce的架构

主从结构:

--主JobTracker:负责调度分配每个任务task在tasktracker上运行,如果发现有失败

的task,就重新分配其任务到其他节点。每个Hadoop集群只有一个JobTracker,通

常它运行在Master节点上。

‑‑TaskTracker:tasktracker主动与jobtracker通信,接收作业,并负责直接执行

每一个任务,为了减少网络带宽,TaskTracker运行在HDFS的DataNode上;

从应用的角度来理解:集群中的节点由jobtracker和若干tasktracker组成,

责务的调度,而tasktracker则负责任务的执行,因此,tasktracker运

jobtracker负任

行在datanode上,而namenode和jobtracker则无需在同一台机器上。

MapReduce的架构

主从结构:

--主JobTracker:负责调度分配内一个任务task运行于tasktracker上,如果发现有失

败的task就重新分配其任务到其它节点。每一个hadoop集群只有一个JobTracker,

一般它运行在Master节点上。

--TaskTracker:tasktracker主动与jobtrac

文档评论(0)

1亿VIP精品文档

相关文档