Hadoop Shuffle机制详解:Map输出至Reduce输入全过程.pdf

Hadoop Shuffle机制详解:Map输出至Reduce输入全过程.pdf

定义

系统执行排序、将map输出作为输入传给reducer的过程

称为Shuffle。

上,Shuffle这个定义并确。因为在某些语境中,它值代表reduce任务获取

map输出的这部分。我们应该理解为从map产生输出到reduce输入的整个过程。

圆形缓冲区

注意:这两/三个

文档评论(0)

1亿VIP精品文档

相关文档